benchmarks.wiki / Public workspace
.·-=*#######****++++++++++==-::··......··:-+*#%@@@@%#*=-·. ..·:---------==+*#%@@@@@@@%#*+=--:::--:::·..
.·::--========---::::················:::--===++++==-:·. .··:----------===++****++=-::·........··...
...··········.... .....················.... ..···············:::::···... ....
...
...
...
....
....
....
..... ...... .........··....... ......··..... ...········.::.........::. ...
..... ..··:--===---::·····:::::::··..
..... ..·:-=++***++==-----===+++==-:·..
.... .·:-==+++++===----==++++++=-:·.
.... .·:-=++++++========++***++=-:·.
.... .·:-=++***+++=====+++****+=-:·.
...... ..·-=++****+++=====+++**++==-:·.
..···::···...... .... ....·········...............··... .··-=++*****++=======+++++==-:·..
.·:-==+*+=-::·........···········..···::--=====--::···..····::::::·:··.. ..·:-=++*****++=------=======--:·..
.·:=+*#%%#+=:·.. ..··:-=++++++==------==++***++=--:······::-======-::·.....·:-==+****++=--::::::--======--:··...
.·:-+*%@@@@@@@@%#*=-:··.......····:::::--=+**#%@@@@%#*+=:·.. ..··::···......··:=+*#%@@@@@%##*****++=-:·..
.·:-=+*******+=-:·. ..·:::-----------======--:··. ..········....··::-==++*+++==--::::::-::·..
..··:::::::··.. ...···::::······.......... .................····:::····......··:···.
..···..
......
......
.....
....
..
.... ...............··········... ...··:::::::·=-.........··..
.. ...·:-==+*****+==-::···········...
......·:-=+#%@@@@@@%#*+=----------::·..
.......·:-=*#%@@@@@%#*++=----------:··.
. ........·:-+*%@@@@@@%#*++=--------::·..
. ........·:-=*#%@@@@@@%#*+==----::::··..
.....·.....··:=+#%@@@@@@@#*+==-:::::····..
..···::···.... ......... ....·······... ....·····....··:=+*%@@@@@@@%*+=-::·······....
.·:-==++==-::··.....···:::::::··......··::---=---::··......·······-::·····::-+*#%@@@@@%#*+-:··.......······......
.·:-=+*#**+==-:······:--=++*+++=-::·····::-==++++==-:···.···::--====--:::·:::-=+*#%@@@%#*+=:·... ..··::----::··..
.:-+#@@@@@@@@@%*+-·. ..··:::--:::---==+*#%@@@@@%#+=-:···..········.. .·:=+#%@@@@%%#*++==--::··.
.··:-=+******+=-:·. ..·::-----::::::::--=======-::·... ....····... ..·:-==+++++==--::···:··..
...·····::····... ...·········..........····.... ...... ...·········.....·.···...
. ..···...
..···...
..····..
..····..
. ..···...
....·....
..... ............·····::::::··... ...····::···-:.. ··..............
.......··:--=+++++==-:··......···:::::···...
..······:-=+*#%@@@%#*+=--::::::-------::·.
..·...··::=+*#%@@@@@%#*+=--:::::----::··.
.......··:-=*#%@@@@@@@%#*+=--::::::···.
........·:-=+#%@@@@@@@@%#*+--:···....
.......··:-=*#@@@@@@@@@@%*+-:·..
...·····.... .................·········.. ...······::-+*#@@@@@@@@@@%*=-·. ........
..·::-----::··.......··::------::::::::--======-:··. ..··:::::--=+*%@@@@@@@@@@#+-:. .·:::::··.
..·:-=++++==--::···::-=++**##**+==-----==++***++=-·.. ..·::------==++*#%@@@@@@@@#+=:. .·-=+++==:·.
...·::-=+*#%@@@@@@%#*=-:·. .··::----::::::--=+*#%%@@%#*+=-:·.....···::::::······:-=+#%@@@@@@%*+=:·..
..··::::--===++++==--:·.. ..··::::::·······::--===+==--:··.. ....········...···::-=++++++=--:·..
............·····..... .....··....... ......······.... .......... .....·········...
...
........
..·.····..
..:·:::··.
··-:--:··.
··-:-::·.
...... ...······......········... ....····..........·····..·· . ...·····-:-:·.
.··---::::::::::-----::··.. ..··:------:·:·.
.·--+==---:----==++++==-::··...···:--=====-:·..
..::==--::::::--=++****++=--:::··:::::::::·..
..::--::·····:--=+*#%%%%##*+=--:···.......
··:::······:-=+*#@@@@@@@%#*=-:·. ....
..········:-=+*%@@@@@@@@@%*=-·. ..···..
........ ...··············::::::··.. .····::::-=+*#@@@@@@@@@@%*-:. .·:::::·.
....·······.. ..·:-===++========+++++++=-:·. .··::---=++*#%@@@@@@@@@%*=:· .:-===--·.
....·:::--::··.. .·:-+*#%%@@%%%######%%%%%#*+=:·. .··:-==++**##%@@@@@@@@%#*=-·. .·-=++++=-·.
..·::--==----==++******++=-:·.. ..·:-=++***++=======+***#**+=-:. ..·:--====+++**#%@@@@@@@@@#+=:.
..··:::::::··::::-------::·... ...··:-------:::::::::------:··. ..·:::-------===++*****+=-:·.
...................··..... ....·····................... ....····················...
..···...
..::--:··.
··=-+=-:·.
·:+=*+-:·.
::+=*=-:..
... ..···::::···..... ... ..···:::::······.........·. ..···::+=+-:·.
·::****++==-:::·······... .··::--==-:-:·..
::**@@@%#*==-::·····::::······..····:::-----::··..
·:**@@%#*+-::······::---===---::··.......·······...
··=+%#**+=-:······:-=++*****+=-:·.. ..·····.
..--*++==-::···::-=+*#%%@@%#*+-:· .··::··.
.·:===----:::--=++#%%@@@@%#*=-·. .··::::·.
......... ....······......·········... ...::---=====++**#%%@@@@%#*+=:·. .··:::::·.
......·······... .··:-=======-----===+++==--:·. .·:-==++***####%%%%%##**+=-:·.. ...·::::::·..
..············.. .:-+*#%%@@%%%######%%%%##*=-:. .·:=+*#%%%%%%%##**+++===---::::::::::::-::::··..
..·-=+**#*+=--::···:::::::··.. .·:=+#%@@@@@@@%##********+=-:·. .·:-=+**###%%%@@@@@@@@@%#+=:.
..·::--=--::··......·······... ..·:-=++*****++==--------::··. .·:-==+++*******++++==--:·.
...··.... ....... ..···:::::::····.......... ..··:::::::::·····.....
..···...
..::--::·.
··==*+=-·.
·:+=*+=-:.
·:+=*+=-·.
··+=*+=:·.
....···:::::::::··... ...··::::::::···..... .. ....··--+=-:·.
··:********+=-:·... .............···:::=--:·.
::**@@@@@@#+=:·.. ...··:::::···.......·::----:··
::**@@@@@%*=-:·.. ...·::------:··. .·::---:·.
·:**@@@@%#+=-:··...··::-=====--:·.. .··:::::·.
··==%%###*+==-::::::---======--:··... ...·······..
...::++*****+++==============---:::············....
............. .....··..... ............ ..·-=++**####***++==-----------===---:::··...
...······::::::···.. ..··::-----::········:::-----::··. ·:-=+*#%%@%%#*++=-::::::--=++****++=-:··.
.··:::::::::---:::·.. .·:-=+******+===---===+++++=--:·. .·-=*#%@@@@%#*+=-:····::-=+*##%%##*+=:··.
.·:=+*#%@@@#*=-:·.......... .·:=+#%@@@@@@@%#**++++++++==-:·. .·:=+*#%@@@@@@@@%%#**+==-:·..
.·:-==+**+=-:·.. .·:-=+*******++==----:::::··.. .·:=+*********+==-::··...... ...
..···:···... ..··::::::::::···........ .··::::::::::··.. ··::··..
..::=--:·.
.·--*+=-·.
··==*+=-:.
··==*+=-:·.
.·--++=-:·.
..:-++=-:·.
....··::::::::···............ ..··::::::::··.. .. ..::++=-:·.
.··********+=-:·. .......... ...··::===-:·.
·:**@@@@@@@#+=:·. ...·······....··::-====-:·.
·:**@@@@@@%#+=-:·... .....········::::--=---::·..
··=+@@@@@@%#*+=--:·.... ...···::--======--:··..
..--*#%%%%%%%#*+=-:·.. ..·:-=++****+=--·.
...::++*#%%@@%%#*+=-··. ..·:=+*#%%%##+=-·.
...······················... ............ ···==+*#%%@%%#*+=-:·.....·:-=*#%@@@%%*+-·.
..··::-======---::::::::----:::··.. ..···:::::····....·:-=++*#####*+=--:·····:-=+*#%@@@%%*+=:·.
..·······::-=++****++=--:::::--==+++++==-::··....···::------::::··::::--==+++++===--------=++*##%%%##*+=-:··.
.·:-+*#%@@@@%*+-:··....···:::···.......·:-=+**##**+==-:::::--===++==-::·. .·:-+*%@@@@@@@%#*=-:··.....··:::···.
.·:-==+****+=-:·.. ...... ..··:-==++++==--:::·····:::····.. .·:-=+*******+=-:·.. ..····-::·..
...···::::··... ...··:::::::···....... ..··::::::::··.. ..::=-:··.
..::=-::·.
..::--::·.
..··---::·.
.··----:·.
.·:===-:·.
..::++=-:·.
..····::·····.............. ...····::::···... .. ....--++=-:·.
..·==+++++++==-:··.. ...··::--==-+=-:·.
··==#%%%@@%%##*+=-·.. .·:-+**##%#*+=-··.
··--*##%%@@@@%#*+=:·. .·-+*#%@@@%#+-:·.
..--**#%@@@@@@%#+=:· .:=+#@@@@@%#+-·.
..--**#%%@@@@%#*+-:. .·-+*%@@@@@%*+-·
...--**###%%##*+=-:·.. ..·:-=+#%@@@@%#*=:·.
..··:::::::::·········..... ......·····---****+++==--::::··:::-==+*##%%%%##*+-:·.
..·:-=+******++==----::::::::··.. ..··:---=====-*+==-::······::--=+**##%%%%##**++=--:··..
..·-=*#%@@@@@%%#*+========+++==--:·.. .·:-=+*#%%%#*+=-:·.. .·:-+*#@@@@@@@%#*+==--:::::::··...
..·:-=+***++=-::····::-=+*##%%#**+=--:::::-------::··.......··:--======--:::::::-=+*##%%%%%#*+=-:···.···:--=---:·.
..·:-======-::··.....··::------::···....···::::::::···.........················:::--======---:::·······::::·::··.
..··::::···... ........... ....········... .....................·······.........·····..
....··....
..·····.
..·:::··.
..··---::·.
..::===-:·.
··==*+=-:·
......... ..········..... .............................··..... . ...··:::+=*+-:·.
...····:::--=====--:·. .·:-=+****+=+-:·.
..::-==+*##%@@%%#+=:. .:=*%@@@@@@#+-:..
..::++*##%%@@%%#+=:·. ·:=*%@@@@@@#+-·.
··==###%%%%%#**=-:·. .·:-=*#%@@@%#*+-·.
··++@%%%##*+=--:··......··::-=++**###**+=-:·.
:::**@%#*+=-:·.....··:--=++***#****++==--::·..
..··::::::::···............... ..··::::***%*+-:.. .·:-+*%@@@@@@%#*+==-:::····..
..·:-=+******++=--::::::::::::··.. .·:-=+*****+#+-:. ·:=*%@@@@@@@@%#+=-:·········...
.·:=+*%@@@@@@@%#*++==========--:·.. .·:=+#%@@@@@#*=:. .:=*%@@@@@@@@@%*+-:···..·······..
......... ..·:-+*%@@@@@@@@@#*+=-::::::::::···... ..·:-=+*##%%%%##**+=--:::·::::-==+***##***+=-:··..
...............··:-=+******++=-::··....·········... .··:-==++++==-::·... ...·::-=++***++=-::·...
........ ...····:::····..... ........... ..········... ..··:::::::··....
. . .
....·.....
..··::···.
··--=-::·.
·:+=+=-:·.
::+=*=-:·.
................ ....···..... ...··::::::··... ...······..·. ..··::::+=*=:·.
...·······::---=---:·.. .·:-=+****+=+-:..
..::++++*****++==-:·.. .·:-+*#%%@@%#+-:·.
··++%%%%#**+=--:··...........··::-==++*****+-:·..
::**@@@%#+=-:·.......··::-----------=======-:··.
::**@@@#+-:·. ..·:-=+******+==--:::::::::··..
:::**@%*=:·. .·-=*#%@@@@%#*+=-:···········...
....···::::····................. ..··::::**+#+-:. .·-+*%@@@@@@@%#+=-:·......····...
.......···:--==+++++===--:::::·······... ..·::-==+++==-+-:·. ..:-=*#@@@@@@@@%#*=-:··.....···....
....········:--=+*#%@@@@@@%%#*++=-::··... ...··::-==++++++==--:··... ..·:-=+*#@@@@@@@@@%*+=-:··..........
..·:-=*%@@@@@@@@@%#+=-:·············.. .:-+#@@@@@@@@%*=:·. .·-+*%@@@@@@@%*+-·.
......·::-=+********+=-::··............. ..·:-=++***++=-:·. .·:-=+*******+=-:·..
....···::::::::···.... ....·······... ...··::::::::··..·..
·.···..
··:::·..
··--=:·..
::=-+-:·.
::+=+=:·.
::+=+-:·.
............... .....······:······...... ..........·. ......·····=-=-:·.
.··-----::::····...................···::--==--=-:·.
··++@%%#*+=-:·......···::::::::::·::::--==+==-:··.
::**@@@%*+-:·.. ..·::-=====--::·······:-----:··..
::**@@@#+=:·.. ..·:-=++***+==-:··.....··::::::·..
::**@%#*=-:·.....··:-=+**##**+=-:·.. ..··:::::·..
···==#*+=--:······::-=+**####*+=-:·.. ..··::::··.
....···.............····......... ............:::==----:::::::--==+**#####*+=-:·... ...··::::·..
.··::----::·······::--==+++++==-::·.. ..··::::-::::···.....::::-----------===++**#####*+=-:··.....·······..
.·::-=++=--:·····::-+*#@@@@@@@@%*=:·. .·:-=+*###*+=-:·.. ..··:--=======----==++*##%%%##*+=-:··....·····..
..···::::::::--=++*#%@@@@@%##*+=-::··..... ...·:-=+*#%@@@%%#*+=-:·.. ..·:-+*#%@@@@@@%#*=:·.
...··········::--==++*****++=-::·.. ..··::----=----::···..........··::--==++****++=-:··.
..............···:::::::::··.. ...·······... .......········::::···-::·.
··-:-·..
:·=-=:·.
::=-=-·.
::=-=-·.
··=-=:·.
··-:-:·.
...···:::···.. ..···:::::····..........··..... .·.........::.........::-:·.
.··====--:··.. ..··::------::····.·······::·..
··=+%##*+-:··.. ..··:-=+****++=-:··.....··:::···.
··==##**+=-::··..··::-=++****+=-:·.. ..··::··..
.·--***+++=---:::::--==++++++=-:·. .··:::··.
..::=+++++++++====--=====++==-::·. ..·::::·.
··-=++*#####**++===----=----:··. .··::::··.
..···::::··... ...········... ....··..... ...:-+*##%%%%##*+==---------:::·.. .·::--::·.
.·:-=+*++=-:··.....··:--=+++++=--:·. .··::-----:··.. .·:-=*#%%@@%%#*+=--::::::::-:::··... ..·::--::·.
.·:-=+*#*+==-::···::-=+*#%@@@%%#*=-:·.......·:--=+++++=-::·.. .·:-=+*#%%%%#*+==-::··:::-------::··....··:::::··.
.·:-=+***#**++=---::--==+*#%%%%%%#+=-·. .·:-+*##%%##*+=--::···:::---============++*******=-:·.
..·::------:::······::-==+*****+=-:·. .·:-=++++==-:·.. ..··::-------::::::---=====-:-·..
..................···:::::::··.. ..··::::··.. ...·······.......·······---:·.
··=-=-·.
::=-+-·.
::=-+-·.
··=-=-·.
··-:-:·.
··:::·..
..···::::···. ..··:::::::····............... .·.···:::::++···......····.
...::::···... ..·:-==+****++=--:···.....·..
..··:::::::········::-=+*#%@@@%%#+=-:·..........
..·::-------------==++*######*+=:·.. ....
.·::-=++*****++++++++++**+++=-:·. .....
·:-=*#%%@@@%%#**+=======---:··. ......
.·:=*#@@@@@@@@%#*+=--:::::···.. .····.
..···:::::··.... ............... .......... .:-+#%@@@@@@@@@#*=-:···....... ..····..
..·::-=++===---:::········:::::::::::::::········......... ..:-=*#@@@@@@@@@%#+-:·... ..·:::··.
..·::-==++++++++++===---:::---==+***###**+=--:··...............···::-=*#%@@@@@@@@#*=-:·. .... ..··::::·.
..·:-=*#%@@@@@%#*=-::····:-=+*#%%%%#*+-:. ·:-+*#####*+=-:··....·:-=+**##%##*+=-::······::---::·..
...··::--====---:::····:::--===++==-::·.. .··::------::··... ...·::--======-::··......··:::·::·..
...............·············.... .............. ....·······..... ......::-:··.
.·--=-:·.
··--=-:·.
··=-+-:·.
··=-=-:·.
··--=-·..
··-:-:·.
................ ...····::::::::···..... .·..·::::::**:::····..:·:·..
. . ..·:-=**********+=--::··.·..
...·······::-=+*%@@@@@@@@@@#*=-::··...
.··:-------===++*#%@@@@@@@%#+=-:·..
.·:-=+******+++++**#%%@@@%#*+=:·..
..:-=*#%@@@@%%#**+++++******+=-:·.
.·:-+#%@@@@@@@@%#*+==---====--::·.
...·············... ....········.... .·:=+#%@@@@@@@@@%#+=-::···::::··.. ..
...··::--===+++==-::·.. ..·:-==+****+==-:·. ....·:-=+#%@@@@@@@@@@%*+-:·........... ....
...···:-==+**###**+=-:·.....··-=+#@@@@@@@@%*=:· .··::---=++*#@@@@@@@@@@@#*=:·. .....
..··:--=++**########**+++===---------------:::::::·········::::------:::::::--=+*#%@@@@@%#*=-·.. .......
..·::::::::::::::::---======---::··········:::::::···..... .....··········::::--==+++++==-:·.. ......
........ ...····:::····... ....······... ................········... ..···..
..····..
··:::·..
.··-::··.
..:·--:··.
..::-::·..
..:·-::·..
..········.. ....... ...···:::::::::··.. . ..··::::**:::···...:·::·..
. ..·:-=+*********+=--::····...
.......··:-=*#@@@@@@@@@@@#*+--:··...
..···:::::--=+*%@@@@@@@@@@%#+=-:·...
.·::--=======++*#%@@@@@@@@@%*=-:·.
.·:-=+*****+++++*##%@@@@@@@%*+-:·.
.·:-=+*#%%%%#**+++++*##%@@@%%*+=:·.
....·····:::····.. ...··::::::··... ..··:-+*#%@@@@@%#*++====++**##**+=-:·.
...···:----====---::··.. ..·::-=+******+=-:·. .......:::--=+*#@@@@@@@@%*+=------=======-:·..
..·::-==++====---::::·······::-=+*#%@@@@@@@@#+-:. .·::----===+*#%@@@@@@@@@%*+-::····:::----::·..
.·:-+*###**++======+**##%%##*+=-:·.. ..·:-=+*##%##*+=:·. ..·::--=====++**#%@@@@@@@%#*=:·. .....
..·:-===--:::·····::--=======-::··.......·::-==+++==-:·. ..·::----=======++*****+==-··. ..
...··....... ......·······...... .....·········.. ...················:·····.. ..
....
.....
......
..··..
.···..
..···..
............. ........... ...···:::::::··... .. ....···==··... ...··...
.. . ............··::-==++++=--:··..........
. ..·········::-=+*%@@@@@%#*+-::·.......
. .···:::::::-=+*#%@@@@@@%#*=-:·...
..·:::------==+*#%@@@@@@@%*+-:·.
.·::--========+*#%@@@@@@@%*+-:·.
. .·:--=+++++===++**#%@@@@@%#*+-:·.
...···········...... ..···:::::···... ..... .. .·:-==+****+++===++*##%%@%%#*=-:·.
.·::-==+==-:::···.............···::--==++++++=-:··. ..······.··.....·:-=++**##**++=====++**####*+=-:·.
.·-=+*###*=-:·.. ..··::-===+++++***##%%%%%#*+=-·. ..·:-----:::···::-==+*#####*+==------=++***++=-:·..
█████╗ ██╗ ██╗████████╗ ██████╗ ██████╗ ██████╗ ████████╗ ██╗ ██████╗ ██████╗ ████████╗██╗ ██╗
██╔══██╗██║ ██║╚══██╔══╝██╔═══██╗██╔════╝ ██╔══██╗╚══██╔══╝ ██╔╝██╔════╝ ██╔══██╗╚══██╔══╝██║ ██║
███████║██║ ██║ ██║ ██║ ██║██║ ███╗██████╔╝ ██║ ██║ ██║ ███╗██████╔╝ ██║ ███████║
██╔══██║██║ ██║ ██║ ██║ ██║██║ ██║██╔═══╝ ██║ ██║ ██║ ██║██╔═══╝ ██║ ╚════██║
██║ ██║╚██████╔╝ ██║ ╚██████╔╝╚██████╔╝██║ ██║ ╚██╗╚██████╔╝██║ ██║ ██║
╚═╝ ╚═╝ ╚═════╝ ╚═╝ ╚═════╝ ╚═════╝ ╚═╝ ╚═╝ ╚═╝ ╚═════╝ ╚═╝ ╚═╝ ╚═╝
██████╗ █████╗ ██████╗██╗ ██╗███████╗███╗ ██╗██████╗ ██╗
██╔══██╗██╔══██╗██╔════╝██║ ██╔╝██╔════╝████╗ ██║██╔══██╗╚██╗
██████╔╝███████║██║ █████╔╝ █████╗ ██╔██╗ ██║██║ ██║ ██║
██╔══██╗██╔══██║██║ ██╔═██╗ ██╔══╝ ██║╚██╗██║██║ ██║ ██║
██████╔╝██║ ██║╚██████╗██║ ██╗███████╗██║ ╚████║██████╔╝██╔╝
╚═════╝ ╚═╝ ╚═╝ ╚═════╝╚═╝ ╚═╝╚══════╝╚═╝ ╚═══╝╚═════╝ ╚═╝ $ open /models/autogpt-gpt4-backend▌ready
AutoGPT (GPT4 backend)
These are quotations of published scores, not measurements made here. Evaluation conditions differ by row, so this is not a ranking. Different metrics must not be combined.
| Benchmark | Score | Metric | Setup | Reported by | Source |
|---|---|---|---|---|---|
| GAIAAutoGPT (GPT4 backend) | 14.4 | Score in % | Level 1 (146 questions). | PaperReported: Not stated | Table 4, Level 1 scoreChecked: 2026-09-16 |