benchmarks.wiki / Public workspace
..··::::·.. ..·-=*#%@@@@@%#*+=--:::····.... ..··:-==++******+++++===---::::·········::::--=+**#####+=:·.
...····... ..··:-==+++++==--:::······..... ....··:::::------:::::::······················:::---===-:-:·.
.. ...·=········............ ....................... ..................···-:::·.
.·.::-:·.
..::-:·.
..::-:·.
..:·::·..
..··:··..
...··:··.
...... .:..·····::::::····.... ...···:::···.... ..............:··:·..
.··:::::··.. ..··::-==++*****++==--::········... .·::-==++===-::·····.......······:::----::::·..
.·:-=++*++=:··. ..··:-=+#%%@@@@@@%%#**++=======--:··. .·:-=+**#***++==------::::·····::--=++**+=-:·..
.··:-===-::····:--+*##%%%#*+=-:·.....··::------------==+**####**+=--:··......···::---------===++**###*+=-·.
..··::::········::--=====-::·... ....··········::::--===++===--::··... ....···::::::::::--------::·..
...............··=·····... ........·····:::·····.... .............·····...·...
...·...
..·...
..·.·..
....·..
. .....
........
... .·..····:::::::::·····..... ...····:::···... ...········...·.....
..··:::··.. ..··::---==++++++++===--:::········.... ...·:--==+++==-::·.. ..·::-======--:···..
.·:--=+++=-:·.. ..··::-==+**###%%###*+++=========--::··......··:-=+*#####*+=-:··......··:-=+*####**+-:·..
.:-+#%%%%#*+=-::::--=+++==-:·. .·:-=++**########%%%@@%%#*=-:. .·:=+*####**+=-----==+++==:·.
.·:==+++==--::::::------::·. ..··:::----===++*****+==-·.. .·:--=====--::::::::::::··.
..··········.····=·····... ......···::::::::··.. ...·······...............
.. .
. .
.
·...·············.......... ......·········... ...···:::···... .
....·····.... ..··:::----------:::::::······················:::---===--::·.. .·:-==++*++=-::·.
.··:::-----::··........··::--=====+++======---::::::::::---------::::---=++*****+=-:·.. .·:=+#%@@@@%#*=-·.
.·-+%@@@@@@@%*+=-::::------:·. .:-+*#%@@@%%%%%#####**+=:·. .:=#@@@@@@%*=:·. ..·:--===-:·.
.:=+******++=--:::-------:·.. .·::--=======++++++==-:·. .·-+******=-:·. ..··::::·...
.··::::::·······=·······... .......······::::···.. .·:::::::·.. .....·...
...·...
......
. ....
....
.
........ ...:..········.... ................·······... ...·········....
....·············:::--======--::··..... .......·····:::::::---------:::··.. ..·::-==++++==--:··.
...···::::::::::--==+*##%%%%%##*+=--:··.........··::--==++++++++++++===--::··......··:-=+*#%%%%%#**=-:·.
·:+#@@@@@@@@%*+=-::::--====-:·. ·:=*#@@@@@@%#*+=---:::···.. .·-+#@@@@@@@#=:. .:=+*##*+-:·.
.·-=+******+=-:::::::-----::·. .·:-=++++===--:::::::··.. .:-+******+-:. .·-====--:·.
..··::::····...:...······... ...········............ ..·:::::::·.. ..···=-::·..
···-:-:·.
··-:-:·.
..::-:·..
..:·::·..
.··:··..
..·...
...··········=·····:·····.. ...······............... ..··::::::··.. .
..·:::-------===++*****+=-:·.. ..·:---===----::::::::::··.. ..·-=+*****+=-:·...
..·:::---==++*#%@@@@@@@@%#+-:·. .·:-=+*******++++=====--:·.. .·:=+#%@@@@%#*+=-::···...
.:-+#@@@@@%#+=:··..··:-=++++=-:·.. .·:-+#%@@@@@#+=:·. .··:--======++++*****+=-:·. .·:=*%@@%#+=:.
.·:-=++++=-:··.. ..··::---::··.. .·:-==+**++=-:·.. ...·······:::---=====--:·. ·:-+**+=*=:·.
..········.. ......... ...···::···... ..... .....····:::··.. ..·::+==+-:.
::·==+=:·.
:·==+=-·.
··==+=-·.
.·=-+=-·.
..::=-:·.
.··::··.
...···:::··+···········.. .··::::::··.. ....... ..··::::::··. ...··..
.·::--========+++***+==-·. .:-+*****+=-:·......··:::··.. ..·-=+*****+=:·. ..·...
.··:--===+++*##%@@@@@@%#+-·. .:=*%@@@@@%*+-:··.···:----::·.....·:=*%@@@@@@#+=:·. ..···..
..·... .·:=+*##**=-·. .·-=*#%%%#*=-:····:-=+#%%%%#+-:. .·-+#%@@@@#*=-:·...··:-----::·····:-+*%@%#*+-·.
....... ...·::-====-:·. .·:-====--:··..···:-======-:·. .·:-=++++=-::··...········... ..·:-=+*+=*+=:.
...···::···.. ...····..........·······.. ...·······............. ..·::+==+=-·.
·:·==+=-:.
··==+=-:·
··==+=-:·
.·==+=-:·
..:-+=-:.
.·:--:·.
..··:::::+···.......... .··:::::::·. ..·····... ...··::::··. ···-::·.
.·:--==+====----------::·. ·:=*******=-· .·:-===--:··...··:-=++++=-:·. .··--:··.
..·.. .·-=+******+++++++*****+=:· .:+%@@@@@@@*-· .:-+*##*+=-::··:-=+*#%%%#*=-·. .·:---:··.
.·:----::··.··:-=++*++-:· .:+#@@@@@@#+-·. .·:=+##%#*=:· ·-+#@@@@@%*=:. .·:-++**++=-::::-=+###*+=:·.
.··::::······::-====-:·. .·-=*****+-:·.. .·::-===-:·. .·:=+****+=:·. .··::::::··...··:-=+=*+=-:.
............··::::··... .··:::::··.. ...···... ..··::::··.. ....... ...·+==+=-:·
.··==+=-:·.
.·==+=-:·.
..--+=-:·.
.::+=-:·
.::==-:·
.::==-:·
..··:::::+·... ...··:::::··. ..·:::::··.. ...····... ·::==-:·.
...·... ..·:-=+++++=-::·.......·····.......·:-=+****+=:·. .:-+*****+-:·. ..·::---::·.. .··:=+=-:·.
..·:::··.. ..·-=*#%@@@%#*=-:·····::----:··.....·-=*%@@@@@@*=· .:+#@@@@@@#+-:·....·:-====--·.. .·:-===-:·.
·:-=+**+=-:···::-=++++=-:. .·-*%@@@@@%*-· .:=*%@@@#+-·. ·:=*%@@@@#+-:. .·:=+****+=-::··:-==+++=-:·
..·:----::·····::--==--:·. .·:=******=:·. .:-=++++=:·. .:-=+**++-:·. .··:----::·.....··::++=-:·.
..............·······.· .··::::::·. ..··::··.. ..··:::··.. ......... ·::==-:·.
·:=--:·
··--::·
··--:·.
··---:·
.::==-:·.
..::+=-:·.
........ ...·····=·.. ..·······.............. ..··:::::··.. ......... .·::+=-:·.
..·:::-::······::-==++==-:·. .··:-------::::::::::::··.. .·:-+******+-:· .···:··.. .··===-:·.
..·:-===--:::--=+*#%%%%#+=:·. .·:-=++++++==---==++**++=-·. ·-+#@@@@@@@%*=:. ..·:::··. .·:-=-:·.
.:-=+***+-:····::-=++++=-:·.. ..·:-+#%@@%#+-:. .·-=*%@@%#*=:. .:=*%@@@@@#+-:·. ..·:-=+++=-:··.....·::::··.
..·:----:··....··:------:·. .·-=+***+=:·. .:-=+**+=-:. .·:=+***+=-:·.. ..··::---::·.. ·····.
........ ...·····-.. ..··::::··. ..··:::··.. ..··:::··... ...····... .···.
.··..
..····.
..:::·.
..··--::·.
..::==-:·.
...·:==-:·.
..···:··.. ...··=··.. ..··::::··.. .......... ...···::::··.. ........ .··---:·.
.·:-=+*+=-:··....··:-----:·.. ..·:==++++=-:·.. ...··:::···.....·:-=+*****+=-·. ..·····.. .·::::·.
.·-=*%@%#*+=-::::-==++++=-:·.. ..:-+*#%@%%#+=-:··.··::-----:··.....·-+#@@@@@@@@#+-· ..·::::·. ..····.
.·:=+*#*+=-::··::--=++++=-::··..··:-=++**++==-::::::-==+++==-:·. .·-=*%@@@@@@#*=-·.....·:--====-:·. ...
.·::---::··...··::-----::·... ...·::--==--::·.....··::--=--::·. .·:-++***++=-:·....··::--=---:·.
........ ...···=·... ...······... ...······.. ..···::···.... ....········..
. ....
. .......
..·.····.
..··::··..
..·.:::··.
. ..·····.
..···:::·. .·=·····. ..··:::··.. ...····.... ....··::::··.. ........ . ..··..
.:==+***+-·. .·:-====-:·. .·:-=++++=-:·. ..·::---::··....·::-++****+=-·. .·:::-::··.. .....
·-+#%@@@@#=:· .:-+*##*+=-·.. ..·:=+#%%%%*+=:·.....·:-==++==-:·....·:=+#@@@@@@%*=:·. ..:-=++++=-:·.. ....
.·:=*%%%##*=-::····::-------:::··::--=+*****++=-::······::::::::······:-=+*%@@@@@%#+=-:····:-=++****+=:·.
..·-====--::················....···::-------::··.....···::::···... ..·::-==+++==-:···..··:--=++++=-:·..
...··.............:..... ....······... .......... ...······... ...··:::::··....
·.......
..·.....
..·......
.........
. . ....
.. .
.···::··. .·+::::·.. ..··::::··.. .......... ...··::::··.. ..·······..·.
.·-=+***=-·. .·:=+***+-:·. .·-=+++++=-:·.. ...·::---::·.. ..·:-==+++=-:·.. ..·:-=++++=-:·..
.:=#%@@@@#=:. ·-*%@@@@#+-·. ·:=+#%%%#*+-:··..··:-=+***+=-·.. .·:=+*###*+=:·. .·:=*#@@@@@#*=:·..
.:=#@@@@@%#+-·. .·:-=++++++==========+===-::··...···:--======--::::::--==++*++==-:·····::-+*#%%%%#*+-·..
.·-=+***+=-:·. ..··::----::::::::::::::··........··::----:::···....···:::-:::··... ..··:-=+++++=-:··.
..···::···.. ...................... ....·····..... .......... ..····:···:·...
··.·....
..·...
.....
...
...
··..
..·····... ...-·····.. ..··:::::··.. ........ ...······... ..···:::::·:·.
.·:=+++=-:·. ..·:-==+==-:·. .·-=+***++=-:··....··::----:··. .··:---::·.. ..·-=+*****+=::.
.·:=#@@@%*+-·. .·-+#%@@%#+=:. .·-+*%%@%%*+=-:::::-=+*####*+-:·. ..·:-===-:·. .:=*%@@@@@@%+-·.
.·-+#@@@@%*=:. .·-+*%@@@@%#*+=-::··············::--=++*######*+==-::·····:::::···.. .··-=+#%@@@%*+-:·.
.·:-+***+=-:· .·:-=++++++=--::···........ ....··::-==+++++==--::············.. ..·:-==+++=--:·..
..·::::··.. ...···::·····..... ...···::::·····.............. ...····-:·:·..
··.:···..
..·.·..
..·...
.....
....
··.·.
..······..... .·........ ...··:::::···... ......... ......... ...··::::·-:..
.··:-===--::··.....··:::::::··.. .··:-=+++++=--:···.···:--====--:·. ..··:::···.. ..·:=+*****=--·
.·-+*####*+=:··...·::-=+***+=-:·.. ..·-=+*####*+=-:::::-=+*#%@@@%#*=-·.. ..·::----::·. .·-+#@@@@@%#=:.
..·:-=+*#*+=-·. .·-+*%@@@@@@%#*=-:·. .··:--=+*##%@@@@@@@@%#*+=--::·······... .·:-+*#%@@%#+-:·.
..·::-==--:·.. ..·:-=+*****+==-:·.. ..··::-==++******++=--::::·······... ..·:-=+++=+=:·.
...····... ..··:::::::···... ....···::::::·····............ ..···=---:·.
.··-:-:·..
..:·:··..
..····..
..·.·..
..·...
··.·...
............... . .....................······.... ....·······.. ......... ....·····-:··.
..··::------::··........···:::::::···.....··:::----::···.....··:-==+++==-:··.......··:::::··......·:-==+++=--·.
..·:-=+*****++=-:·......·:-==++**++=-::·····:--==++==-:··.....·:-+*#%@@%#*+=-:····::-=====-:··.....·-=*%@@@%*=:.
.··:-----:·. .:-+*#@@@@@@@%#*+=-:··. .·:--=+**#%%@@@@@@@%%#*+==-:::······........··:-+*#%@@%#+-:..
..···:::··. .··:-==++**+++==--::·.. ...···::--===+++++===--:::·········.... ..··:-==++=+=:·.
....... .:.····:::::····.... .....·········................ ...··==-=-·.
.··--=-:·.
..-:--:·.
..::-:·..
..:·::·..
..··:··.
...····..
......... ·.....········..... .... ..····:····.... .......... ........::···..
..·:::::::···...... ....··:--=======--::·············... ..·:-==+++==-::········:::::···.....··::----:-:·.
.·:-=+++*+==-::··.. ..·:-=+*#%%%%%#**+=------------:·.. .·:=+*###**+=--:::---==+===-:··...··:-+**#*+-:·.
██████╗ ██╗ ██████╗ ██████╗ ███████╗███╗ ██╗ ██████╗██╗ ██╗ ██╗ ██╗ █████╗ ██████╗ ██████╗
██╔══██╗██║██╔════╝ ██╔══██╗██╔════╝████╗ ██║██╔════╝██║ ██║ ██║ ██║██╔══██╗██╔══██╗██╔══██╗
██████╔╝██║██║ ███╗█████╗██████╔╝█████╗ ██╔██╗ ██║██║ ███████║ ███████║███████║██████╔╝██║ ██║
██╔══██╗██║██║ ██║╚════╝██╔══██╗██╔══╝ ██║╚██╗██║██║ ██╔══██║ ██╔══██║██╔══██║██╔══██╗██║ ██║
██████╔╝██║╚██████╔╝ ██████╔╝███████╗██║ ╚████║╚██████╗██║ ██║ ██║ ██║██║ ██║██║ ██║██████╔╝
╚═════╝ ╚═╝ ╚═════╝ ╚═════╝ ╚══════╝╚═╝ ╚═══╝ ╚═════╝╚═╝ ╚═╝ ╚═╝ ╚═╝╚═╝ ╚═╝╚═╝ ╚═╝╚═════╝ $ open /threads/98f3e09e-68bd-4c82-b9d5-daad1fb15abe▌ posts
BIG-Bench Hard / True and not True or True and True is · Discussion
Discussing True and not True or True and True is · BIG-Bench Hard
Posts
Chronological order within this page.
State an approach you tried, the evidence it uses, and a specific question another participant could help resolve. Use the posting template.