benchmarks.wiki / Public workspace
..·::----::::::-==+**####*+=-:··.. ...·······.. ..·:-===+==-:·.. .·-=*#%@@@@@%#*+=-::··········..
...········:::--====--::·.. ..······... ..·:-=++**++=-::·. ..·:-+*%@@@@@@@@%#*+=-:::········..
.......······.... ..................··:-=+**###**+=-:···..··:-=+#%@@@@@@@@@@%*+=--:::::·····..
..·······::-=+*#%%%%%#*++=-:::::-=+*#%@@@@@@@@@@@%#+=--:::::·····..
·.:·::·:::-=+*#%@@@@@%%#*+==---==+*#%@@@@@@@@@@@@%*+=--:::::·····..
··:·:::::-=+*#%@@@@@@@@%#**++=+++*#%@@@@@@@@@@@@%#*+=-::::::·····..
·.:·:::::-=+*#%@@@@@@@@%%#**+++**##%@@@@@@@@@@@@#*+=--:::·:······..
·.:·:··::-=+*#%@@@@@@@@@%#***++**##%@@@@@@@@@@%#*+=--::··········..
..·.····::-=*#%@@@@@@@@%%#**++++**##%@@@@@@@%%#*+=-::···········...
.....·········.........···::::***::::··.. ......·:-=+*#%@@@@@@%%#**+++++++**##%%%%%#**+=--:·············...
...··::-==+++++==--:::::::--=++******++=-:·.. ..·:-=*#%%@@@@%%#*++========++*****++==--:···....········...
..·:-=+*%%@@@@@%#*+==-----==+*#%%%%%#*+=-:·. .·:-=+*##%%%%#**+==---::----======---::··.......········...
......···:--=+++*+++=-::·... ...·:--==++==-::·.. ..·::----::·. .·:-=+++++=-:·.. ....
...··:::---=---::··.. ..·::-----::··.. ..··:-----:·.. .·:=+******+=-:·. ......
.....········... ...·······... ..·::--==--:·.. .·-=+*#%%%##*+-:··. .......
.··:-======-:··. .·:-+*#%@@@@@%#*=-:··.......····...
..·:-=++***+==-:··.....·:-=+*%@@@@@@@@%*+=-:··...········..
..·:-=+*#####*+==-::··::--=*#%@@@@@@@@@%#*+=-:·····::::::··.
. ...·:-=+*#%%@%%%#*+==----==+*#%@@@@@@@@@@@#*+=-::::::-----::·.
. ...·:-=+*#%@@@@@@%##*++==++**#%@@@@@@@@@@@@#*+=---::--===---:·..
. ..··:-=*#%@@@@@@@@@%#******##%@@@@@@@@@@@@%#*+=------=====--:··.
.....··....... ....··::::***::··... . ..·:-=+#%@@@@@@@@@@@%##***##%%@@@@@@@@@@@%#*+==------=====--:·.
.··:---==---::········:--=++*****++=-:··... ..·:-=*#%@@@@@@@@@@@%##****##%@@@@@@@@@%%#*+=---:::--====--::·.
.·:-+*##%###*+=--:::::-==+#%%@@@@@%#*+-:··....··:-+*#@@@@@@@@@@@@%#*******##%%%%%%%#**+=--:::::::--=---::·..
...···::-------::··... ..··:-=+*##%%##*+=--:·····::--=+++++=-:·. .·:-=++**++=-:·. ....
..···::::::::::··.... ..··:--=++++++==-::·.....···:--======-:·. .·:-=+***+==:·..
.....······..... ....··:::::::··... . ....··:--====--:·. .:-=+****+=-:·.
...·::-====--:·. .·:=+**#**++-:·. ...
..·::-====--:·.. .·:-+**####*+=-·. .......
.·::-=====--:·.. .·:-=*##%%%#*+=-:·. .···::··.
.·:-==++++==-:··.. ..··:-+*#%%@@%%#*+-:·.. ..·::----::·.
.·:-=+****++=-::··..··:-=+*#%@@@@@%#*+=-:··...··:-=++++=-:·.
.·:-=+*####**+=--::::::-=+*#%@@@@@@@%#*+=-::::::-=+****+=-:·.
.....··...... ...·····:+==·.. .·:=+*#%%%%%#**+=-----==+*#%@@@@@@@@%#*+=------=+*####*+=-:·.
.··::----:::··........··:--======--:·.. .·:-=*#%@@@@@%##*++=====+**#%@@@@@@@%#**+==---==+**#%##*+-:·.
.·:-==+++++=-::·......··:-=+*####*+=-:·. .·-=+#%@@@@@@@%%#*++===++**#%%%@@@%%#**+========++****+=-:·.
....··········... ..·:-=++**##**++=--::::::--=++******+=-:·. .·:-+*#%@@@%%#*=-:··......···:···..
....········..... ..··:--=++++++==--::····::--=++*****++=-:·. .·-=+#%@@@@%#*+=:·.. ........
............. ....···:::::::····....··::--=++*****++=-:·. .·:-=*#%@@@@%#*=-:.. ......
..··::--=++******+=-:·. ..·:=+*%%@@@%#*+-:·. ......
. ..·::-==+**#***+=-:·.. .·:-=*#%@@@@%#+=-·. ..····..
..··:--=+**##**+=-:··.. ..··:=+*#%@@@%#*+-:·. .··:::::·.
..··::-=+**###*++=-:·......·:-=+*#%%%%#*+=-·. .·--===--:·.
..·:-=+**###**+=-::··..··::-=+*#%%%##*+=:·.. ..·-=+***+=-:·.
..·:-=+*#####*+==-:······:-==+*#####*+=-:··.....·:-=+#%%#*+=-:·.
...············.........···:::::::*+=·.. .·:-=+*##%###*+=-::····::-==+**###**+=--::···::-=+*#%@%#*+=-·.
..·:--==+++===--::······::-==++***++=-:··. ..·-=+*#%%%%#*+=--::···::--=++*****++==---:---=+**#%%%#*+-:·.
..·-=+*#####**+=-::····::-=+*##%%%#*+=-:·. .:-=+##%%%%#*+==-::····::-==++***+++====-===++***##**+-:·.
..·······.... .··:::::::···... ...··::-----:··. .·:=+*#%%%%#*+=-:··....··::----::·.
......... ...··::::::···... .··::------::·.. .·:=+#%@@@@@%#+=-:·.......·::--::··.
....·····..... ..···:--=====-::·. .·-=*#%@@@@@@%#+=-·.. ..·:::::··..
..··:--==++++=--:·.. .·:-=*#@@@@@@@@%*+-:·. ..·::--::·..
..·:--=++****++=-:··.....·:-=*#@@@@@@@@@#+=:·. .·:-----::·.
..::-=+**#####*+=--::···::-=*#%@@@@@@@@%*=-·. .·:-=++==-:·.
.·:-=+*##%%@%%##*+=--:::--=+*%@@@@@@@@#*=-·. .·:-+***++=:·.
··--=+#%%@@@@@@%#*+==----==+*#%@@@@@%#*=-:·. ..·-=+*###*+-:·.
.·-=+*#%@@@@@@@%#*+==-----==+*######*+=-:·.. ...·:-=+*#%#*+=-·..
...···:::::::···········:::::::::::**+··... .·-=+*%@@@@@@@@@#*+=--::::--==++++++=--:···...··:-=++*###*+-:·..
..·::=++******+++===---==++************+=-:·.......:=+*%@@@@@@@@%#+=-:·······::--------::::··:::-==++***++-:·..
..·:-+#%@@@@@@@@%%#***+***#%@@@@@@@@@@@%*+-:·......·:-+*#%@@@@@@%#+=-:·.. ...··::-------------===+++==--:·.
.··:::::::····.... ...····::····...........········.. .·:-=+++++=-:·.. .·:-====-::·.
............ ....·····.... ....·····.. .·:-+*####*+=-:·. .·:-=++++=-:·.
....... ...····.. .·-=*#%@@@%#*+-:·.. .·:-=*###*+=-·.
..·······.. .·:=+#%@@@@@@%#+=:·... ..·:-=*#%%#*+=-·.
..··::::::··... ..·:-+#%@@@@@@@@@#+=:··....·:-=+*%%%#*+-:·.
..·::-======--::····::-=*#@@@@@@@@@@%*+-:·....··:-=*##%#*+=:·.
.·::-=+**###**++==---==+*#@@@@@@@@@@%*+-:·.....·::-=+**#*+-:·..
..:-=+#%@@@@@@%%#**+++++*##%@@@@@@@%#+=-:·......·::-==+++=-:·..
.·=+*%@@@@@@@@@@%#**++++++**######*+=-::·......··::------:··..
....................····:::::::::+=-... ·:+#%@@@@@@@@@@@%#*+=-------======--::···....···:::--::::·....
..··:----=------::::---==++*********+=-:··....··:-*%@@@@@@@@@@@%*+-:··.....···::::::::········:::::::::··.......
..·:=+*##%%%##***+++++**#%@@@@@@@@@@@%*+=-:····:-=+#%@@@@@@@@@@#+-:. ..··:::::::::::::----::::····........
.··:::::::::::::::::··········:::---==========--------=====--::·.. .·:-==++==-:·. .·:=*###*+=-:.
...·········.................·····::::::::::·········::::::::·.. .·-=++**+=-:·. .·:=*%@@%#*+=-:·
..... ................ ..········.. .:-=+*###**=-:·. .·:=+#@@@@%#*+=-·.
....···... .·:=+#%@@@@%#*=-:··..··:-+*%@@@@@%#*+-·.
...······... ..·:-+*%@@@@@@@%#+=-:::::-=+*#%@@@@@%*=:·.
.··::----:::······::-+*#%@@@@@@@@%#*+=-:::--==+**##**+=:·.
.·:-==++**++===----==+*#%@@@@@@@@%#*+=-:::::::-------:·..
.:-=*#%%@@@@%##*++==+++*##%@@@@@%#*+=--:············....
.·=*#@@@@@@@@@@%#*+======++*******+=--:··............. .......
.....................·········..··. :-#@@@@@@@@@@@%#+=-::····::--====--::··.... ........····::··..
..···:::::::·······:::---===++==--:··.. ..·:-=@@@@@@@@@@@%*=:·. ..··::::::::··.........····:::-------::·.
..··:-========--------==+**##%%%##*+=-:··...··:=+#%@@@@@@@@@%*=:. .··::---::::·····::::----===+++===-::·.
.... ..................···::---===+++++=============--:··.. .·:-=++***+=-:·. .:=*@@@@%#*+=-·.
................····:::::---::::::::::-==----::··.. .·:-=++***+=-:·. .·-+#@@@@@@%#*+=:·.
.........···...........··------::··.. .··-=++****+=-:··.. ..·-=*%@@@@@@@%#*=:..
..:::::::::··... ..··:=+**####**+=-::::::-=*#%@@@@@@@@*=:·.
..·::------::··......·:-=+*##%%%%%#**+===-==++*##%%%##+=-·.
..::-==+++==--::·····:--=+##%@@@@@%##*++==========--::·.
..-=+**####*++=-::::::-=+*#%%@@@@@%#*+==-:::····....
··=*#%@@@@@%#*=--::·:::-=+*#%%%%%#*+=-::·.. ..····.
.:-#%@@@@@@@%#+=-:··..··:-=++**#**+=-:··. ..·::-----:·.
......·························... . ..-=@@@@@@@@@#+=:·. ..·:--=++++=--:·. ..·::-=+****+=-:·.
...··::-----------::::------=----::·.. .·:-=+@@@@@@@%#+-·. .·:--====-::·... ...·::-=++**#%%%#*+=-:·.
.··:-=+******++===-----====+++++=--:··.. ..·:=+#%@@@@@@@#+-:. .·:--===--::······:--=+**##%%%%%%%#*+=-:·.
..··:::::::::::::::::::::::····....··::-=+*#%%%#*+=-·. .·-+#@@@@@@@%#+-:·.
...·················::------::::·····::-==+**###*+=-:·. .·-+*%@@@@@@@@%+-:·.
............. .··--=======---:::::::--==++****+=--:······:-=+#%@@@@@@@#*=:·.
..·:=++*****++=--::····::-==++****++==------==+**#####*+=-:·.
..::+*##%%##*+=-::··..··::-=+**####**++============--::·..
..:-#%%@@@%#*+=-··......·:-=+*#%%%%%#*++=--::····..... ....
..-=%@@@@@%#+=-·.. .·:=+*#%@@@%#*+=-:·... ...·······.
..==@@@@@%#*=-·. ..:-=*#%@@@%#*+-:·. ...·::--===--:·.
.·=+@@@@%#*=:·. .·:=+*#%%%#*+=:·. ..··:--=+*****+=-:·.
....·······:::::::::::::·····... ..·=+%@%%#+=-·. .·:-+**###*+=-:·. ..·::-=++**##%%%#*+=-:·.
..··:-=++++++++++=========----::··.. .·::-==%%#*+=-:.. .·:-=++***+=-::·......·:-==+*###%%%%%%%#*+=-:·.
.·:-=+*%@@@@@%%#**+===----------::··. ..·:=+**###*+=-:·.. ..·:-==++++==-::····::-=+*##%@@@%%%#**+++==-::··.
..........···::::···.. ..········.... ....···::::::---==++*#%%@@@%#*+=-:·.. .·:-=+#%%@@@%#*+-:·..
..... .......... ...::-==+++++++=====+++**####**+=--:··...··::-=+*####**+=-:·...
.·:+*#%%%%%%#*++=------==+++++++==-::·····::--==++++==--::··....
..==@@@@@@@@%#+=-:······::-==++++++=--:::···::::------::::···.....
··**@@@@@@@%*=:·. .·:-=+******+=--:············:::::::·····..
·:**@@@@@%*=:· .·:=+*#%%%#*+=-:··........····:::::--:::··..
·:**@@@%*+-·. .·-=*#%@@@%#*=-:·.. ...···::----====--:··.
··++%#*+-:. .:-+#%@@@@%#*=-:·.. ..··::--====++++==--:·.
.·--+=-:·. .·-=*#%@@@@%*+=-:·......··::-===++++++**++==-:·.
...···:::::::::············... ....::=-::·.. ..·-=+*#%%%%#*+=-:··....··:--=++++*++++++++++=--:·.
..·::-=+*****+++==---------::::··.. ..···::==--::·····::-=++*####**+=-::·····::-==+*******++========--::·.
.·:-+*#%@@@@%#*++=--:::::::---:::·.. ..·:-=+++++++=========+++++++==--::····::-=++*######*+==--::::----::··.
......·::--======--::···....···::::::··.. ..·:--=+++++++++++**##%%@@@%%#*+=-:··.....··:::-----::::···.....
...·········.................. ..·::*#%%@@@%%#*++=====++**####**+=-:·.. ...··:::-------:::···..
.. ...·+*@@@@@@@@#*=-::···::-==++**++=-:·.. ..··:---=======--::·..
::**@@@@@@%*=:·. ..·:-=+++++=-:·.. ..·::-==++++++++=-::·..
::**@@@@%*-·. .·:=++***+=-:·... ..··:-==++*******+=-::·..
::**@@#+-· .·-=+*###**+=-:·.....··:-==++********+==-:··.
::+=*=-· .:=+#%%@%%#*+=-:·····::-==++******++++==-::··.
..:·:·. .:=+#%@@@@@%#*+=-::::::--=+++***+++====---:::··.
..·.. ..·-=+#%@@@@@@%#*+=--:::---==++++++===---:::-::::··..
...···········.....········.... ··::::::::::-=+**#%%@@%%#**+=---::---===++++==--:::····::::::··..
..·:--=++===--::·····::::---:::·.. .··::-+*****+++*****#####**+==--:::::---==++++==--:···....··::::::··.
.·:-+*####*+-::·....··::-=====-:·.. ·:-+*%@@@@@@@%%##**++++===---::::··:::---==+++===-:··... ...·::---::·.
.··:--======-----::--------::··.. ..·:-+*##%%##**+=-----=+*#%%@@@@@%#+=:·. ..····::::::::···..
..··::::::::::::·········... ..·:-=+**@@@@@%*+=-:···::-=+*#%%%#*+=-·. .·::--===+++==--:··.
.....··............ ...··:::**@@@@%*=:·.. .··:=++***+=-:·. .·:-=+**######*+=--:·.
::**@@%*=:· .:-=++++=-:·. .·:-=+*#%@@@@@@%%#*=-:··.
::**%*=:. .·:-=++++=-::·. .··-=+*#%@@@@@@@@%%#*+=-:·..
··=--:. .·:-++****+=--:·····:-=+*#%%@@@@@@@%%##**+=-:··.
..···. .:-=**#%%##*++==----==+*#%%@@@@@@%##**++==-::··..
.... .·:-=*##%%@%%%#**++++++**###%%%%%##*++=---::::···..
.··::::···:::-=+**#%%@@%%%##***++++***####***+==-::··········...
......... ....········.. ....--***+++++++++**########***++++++++++++++==-::·... ....··....
..···::··... ...··:--====--:·. .·:-=++**@@@%%#**+++++++++++++++==============--:··.. ..·····..
.··:::::··.. ..·:=+*####*+=:·. ·:=*%@@@@@@@@@@%#*+==--------------------------::·.. .···:···.
.·::-==++++++=========---::·······::-=+*#%@@@%#*+=:··....·:-=*#@@@@@@%*+-·. ..··:::------:::··...
.·:--=======----:::::···.........··:-==+****+%*+=:·.. .·:-=*#%%@%#*+-:. .·:-==++++++++==-::·..
..····::::·····....... ....···:::::+=*+-:·. .·:=+**#**+=:·. .·:-=+*#%%%%%####*+=-:··.
··=-=-·. .·:-=++++=-:·. .·-=+#%@@@@@@@@@%%%*+=-:··.
··:::·. .·:-==++==-::·.. ..··-=+*%@@@@@@@@@@@@%%%*+=-:··.
..···.. .·::-=++++==--:::::::-=+*#%@@@@@@@@@@@@%%###*+=-:·..
..··:·... ..·:--=++****+++=====++*#%%@@@@@@@@@@@%##***++==-:··..
..::--:·······::-==+**######*****###%%@@@@@@@@@%##*++======--::·..
··=-++=--:::::--=++**###%%%#######%%%%%%%%%##**+==--:::::::::···..
..···::::··.. ..···:::++#*+==------==++**####%##############**++=--:···.....·······..
..·:-=+****++=-·. ..:-=+******+%#*+=--::---==++***####*********+++==-::··.. ...····...
..·:-+*#@@@@@@%*+-·. .·:=*%@@@@@@@@@#*+=-:::::::--==++++++++++======---:··.. ..···...
.:-=+**###***++++=========----===++***###**+=-:·. .·-=*%@@@@@@#*=:· .·::--=----::···.....
..:-=++****++==----:::::::········::::------::···.. .·:=+#%@@@@%*+-:. .·:-=+++++==---::···...
..·:::::::::···............. ............···... ..·:-=+*####*+=-:. .·:-=+**###**++===--:···..
..:·:··.....··:-==+***++=-:·. ..·:=+*##%%%%%##**+++==-::··..
·.::-::···.···::-===+===--:·... ...·:-=+*#%@@@@@@@%##***++==-::·..
··--=-::··..···::--=====---::····::-==+*#%@@@@@@@@@%%##****+=--:··.
··=-+-::··....··:--==========--===++*##%@@@@@@@@@%%###*****+==-:··.
:·=-=-:··.....··:--=++++**++++++***##%%@@@@@@@@%%##****+++++==-:··.
:·=-=-:·......·::-=++**############%%%%%@%%%%##***++++++++++=--:··.
..··:::::::···.. ·:-··:::::··-:-:·......··:-=++*###############%%#####**++====--=====+==--:·..
..··:-=+*******+=-:·. .·:-==+***++=-:::·.......·:--=+*###%%%%#########****+++==--:::::::---===--::·..
...·:--=+*#%@@@@@@@@%#+=:·. ..·-=+#%%@@%%#*=-:··......··:-=++*#########*****++++==---::·········::-----::··..
.:-+#%%%%%##*+++===++++******+++======----::·.. .·-=*#%@@@@%#*=-·. .·:-=+******+==-:··...
.·:=+*****++==------------:::···................ ..·:-=+#%@@@@%#*+-:·. ..·:=++*###**+=--:··...
..···::::····.............. .....·.······::-=+*#%%%%%#*+=-··. .··:-=+*####**+=--:··....
·.-:=--:::---=+**#####*+=-:··.. ..·:--=+*#####**+=--:···.....
:·==++=---:---==++****+==-::··....··:-==+*######**+=--::····.....
::+=*+=-::::::--==+++++==-:::·····::-==+**#####**++=--::::····....
::+=+-:··...··::--=======---::::::--=++**#####***+==---:::::····..
:·-:-:·. ..··:--===+====-------==++***####***++==-------:::···..
··:··. ..·:--==+++++=========+++********+++===---------:::·..
...···::::::::··... ...··++*:::::··.... .··:-==+++++++++=====++++++**+++++====----=====--::··.
..··::--=++*******++=-:··.....··::-==+++==-::·. .·:-==++*****+++++++++++++++++=====------====+==--::·.
..·::-=++**##%@@@@@@@%#*+=-:··....··:-=+++*++=--:·. .·:--=++*******+++++===========-----------===+++==-::·.
.·:-+*#%##*++======++**#####*+==-:···.......... .·:=+*##%##*+=-:·. ..·:=+*#@@@@@@@%#*+=-::····.....
.··:--===---::::::---==---::·.. ........ . ...·:-=+*#%%%%%#*+=-:·.....·::=+*#@@@@@@@@%#*+=-::···.....
.....··...........···.... ........··:···::--=+*#%%@@@%#*+=-::·····:-=+*#%@@@@@@@%#*+=-::···......
··-:=------=+*##%@@@@%##*+=-::::::-=+*#%@@@@@@@@%#*==-:··.......
:·=-+==---==+**#%%@@%%##*+=--::::--=+*#%%@@@@@%%#*+=-:··.......
::=-+=------=+**#%%%%%#**+==------==+*##%%@@%%##*+=-::··.......
:·=-=-::·:::-=++*######*++==------==++*###%###*++=-::··.........
··:·:·....··:-=++**##***+==--------==++*******+==-::··...........
·.·.. ..·:-==+*****++==---::----==+++++++==--::···............
.....····:::::····.........···::***::::··.. . ..·:-==++++++==---:::::----=======--:::···....······...
....···:::--=++*****++=--::····:::-==+++++==-:·.. .·:--==++++==--::::::::::--------:::·················..
.··::::--==+*#%%@@@@@%#*+=--::··::--==+++++==-:·. .·::-=======---:::····::::::::::::··········:::::::··..
██████╗ ██████╗ ██████╗ ██╗ ██╗ ██╗ ██╗
██╔════╝ ██╔══██╗██╔═══██╗██║ ██╔╝ ██║ ██║
██║ ███╗██████╔╝██║ ██║█████╔╝ ███████║
██║ ██║██╔══██╗██║ ██║██╔═██╗ ╚════██║
╚██████╔╝██║ ██║╚██████╔╝██║ ██╗ ██║
╚═════╝ ╚═╝ ╚═╝ ╚═════╝ ╚═╝ ╚═╝ ╚═╝$ open /models/grok-4▌ready
Grok 4
These are quotations of published scores, not measurements made here. Evaluation conditions differ by row, so this is not a ranking. Different metrics must not be combined.
| Benchmark | Score | Metric | Setup | Reported by | Source |
|---|---|---|---|---|---|
| Humanity's Last ExamGrok 4 | 24.5 | Accuracy (%) | Dataset updated April 3, 2025; judge model o3-mini. | LeaderboardReported: Not stated | Quantitative Results, Accuracy columnChecked: 2026-09-16 |