benchmarks.wiki / Public workspace
.·:-=++**++=:·. .·-=*###*+-:·. .·:-=+****+=-:·.......···::::::::··.... ...··::--==++*****++=-:··..
..·:-======-::·.. ..·:-=+++==-··. ..·:-=+%%%#*+=-:·····::--=======--::··... ...··::--===++====-:··...
..··:::::···.. ...··::::··.. ...··:***@%#+=--:::--==+**####**++=-::·... ...··:::---------:··....
:::**%#*+=----=++*#%@@@@@@%%#*+=-::·.. ....···::::::::···.....
::+=*+==--==+*#%@@@@@@@@@@@%#*+=-:··.. ....··········.......
··-:=-----=+*#@@@@@@@@@@@@@@#*+=-::·... ....................
..····::-=+*#@@@@@@@@@@@@@@@%#*+=-:··... ...................
..·:-=+*%@@@@@@@@@@@@@@@%#*+=--:··................. ..........
..·-=+*%@@@@@@@@@@@@@@@%#*++=--::····...................······..
...··... ...··... ..·-=+*#%@@@@@@@@@@@@@%%#**+==--:::::···················::::··..
.·::--::·.. ..··:::::·.. ..·:=++*#%%@@@@@@@@@@%%##**++====------------:::::::::-----::··..
.·:==+++=-:·. .·:-====-:·. .·::-=++**###%%%%%%####****+++++++++++++++++===============-::·..
..·-=+**++=-:·. .·:=*%@@@@%#+-:····:-+*%@@@@%#*=-:·.......···:::---:::::··········::--==++*###%%%%###*+=-:··..
..·:-====--:·.....·:-=+*****+-:··...·:-=++***+%#+=-:··...···::--=====---:::···......···::--=++***#####***+=-::··.
..···::···... ....··::::::··.. ...··:::::+=-+=-:·····::--==+++++++==--:···..........··::--==++*****+++==-::··.
:··-:-::···::--=+**######**+==-:··... ...··::--==========--:::··.
..······::--=+*#%%@@@@%%#**+=-:··.. ...··::::--------:::···..
. ..···::-=+*#%@@@@@@@@@%#*+=-:··. ....···············...
.··:-=+*#%@@@@@@@@@@%%*+=-:··. ..................
.·:-=+*#%@@@@@@@@@@@@%#*+-::·. ..
··:-+*#%@@@@@@@@@@@@@%#*+=-:·.. ....
....... ...····.... .·:-=+*#@@@@@@@@@@@@@@%#*+=-:··.. .........................
..·:::::··... ...··:------::·.. ··:-=*#%@@@@@@@@@@@@@%%#*+=-::···....·····::::::··········::::···..
..·:=++++=--:·····:--=+****++=-:·. ..·:-=+*#%%@@@@@@@@@@@@%#*++=--:::::::---=========---:::---=====--:·.
..·:=+++=-:·.....·:=*%@@@@@%#+=-:::-=+#%@@@@@@@%*+=-:···..···:::---=========------------====+++****###****+=--:··.
..·::--::··....·:-=+*****+=-:·····::-=+*****+==+=-::······:::--===+++++====----::::::::----==+++*****#****++=--:·.
......... ...···:::::··... ...···::::···-:·:·······::--==+++****+++===--::::······:::---==+++********++=--:·.
.....·...···::-==+***###***++==--::····.....···:::--==+++++++++==--:··.
....··:-==+**###%%###**+==-::··...........··::---=======---::··..
..··:-=++*##%%%%%%%#**+=--:··.. ..···::::::::::···...
..·:-=+**#%%@@@@@%%##*+=-:··.. ..·········...
..·:-=+**#%@@@@@@@@%#**+=-:·.. ...·····...
.·:--=+*#%@@@@@@@@@%#*+=-:··. ...····...
....... .....·····.... .·::-=+*#%@@@@@@@@@%%#*+=-:·.. ..···:::···.. ..······..
..··:::::·········::--=====--::··.. .·::-=+*#%%@@@@@@@@@%#*+=-:··........··::------::··....··:-=====-:·.
..·:-==+===-----==++**######*++=-:··... ...··::-=+*##%@@@@@@@@%%#*+=--:···..···:--=++***++=--:::::-=+*%@%#*+=-·.
.··:::::·.. ..·:=+#%%%%#*+--::::-=+#%@@@@@@@@%#*+=-:::······:::::--------=----------:::::::----==++++*****+==-::·.
....... ..·:-==+++=-::··..··::-=++*****+==--=--:::::::::----=============----::::······:::---==+++*****+==-::·.
..········... ....··········..:··::···:::---==++++****++++===--:::···.....···::--==++++++++==-::·..
.. ..·····::--==++**######***++=--::··.........··::--==++++===--:···..
..··::--=+**##%%%%%%###*++=-::··.. ..··::--====--:::··....
..··::-=+**#%%@@@@@@%%#*+==-:·.. ..·::-----::··...
..··:-=+*##%@@@@@@@@%%#*+=-:··. .··::----::·..
..·::-=+*#%@@@@@@@@@%%#*=-:··.. ..·::----::·.. .....
..·:-=+*#%@@@@@@@@@@%#*+=-:·.. ..··:--===-::·. ..··::··..
.....................··...... .··:-=+*#%@@@@@@@@@%#*+=-:·......··:-==+++==-:·.. .·:-=+++=-:·..
...···:::::·::::::----------::···.. ..·:-=+*##%@@@@@@@%#*+=-::·....··:-=++****+=-:··..··:-+*%@@%#*=-:·.
..··:--========++++********++==-::··.. ..·::-=+*#%%@@@@@%##*+=-:···.··::-=*##%%%#*+=-::·::=+#%@@@@@%#*=-:·.
... .·::-====-::··..··:-=+*#%%@@@@@%#**+=-::··.... .....···::-----------:::······::--==+++**+++=-::··..
.··::::::···.....··::--==++++++==--::--::····......·····::::--------:::··.........·::--==+++===-::··...
........... .....···········...:··::·········:::::------------::··.. ..·::--====--::··......
...··::·::::::----=====++++===--::·.. .··:------:··..........
..··::::---==+++********++=--:·. ..·:------:··.. ......
..··:::--=++**###%%%%##**+=-:·.. ..·:-====-:··. ...··..
..··::-==+**#%%@@@@@@%%#*+=-:·. .·:-==+++=-:·. .··:::··.
..··:--=+*#%%@@@@@@@@@%#*+-:·.. ..·:-=+****+=-:·. ..·:-==--:·..
.·::-=+*#%@@@@@@@@@@@%*+=-:·....·::=+*##%#*+=-:·....·:-=+*#*+-:·..
............................. .·:-==*#%@@@@@@@@@@@%*+=-:·····:-=*#%@@%%#+=:··..··-=+#%%@%#+-:·...
...··:::::::::::::::::::::::···... ··:-=+*#%@@@@@@@@@%#*=-::···::-+*#%@@@@#*=-:····:-+*%@@@@@%*=-:··..
..··:-----------===========---::··.. ..·::-=+*#%@@@@@@@%#*=-::····:-=*#%@@@@%*+-:····:-+#%@@@@@@#*=-::···.
......... ..··:--=++++++++==-::··.. ..··:--=++****++=--:··....··:--=++++==-:··......
..................···:::-------:::···.·... ..··:--===++==--:··. ..·::-===--:·.. ....
.......... .........·····....... ...... ...··::--=====--:··. ..·:----:··. ......
..... ....··::--======--:·.. .·::---::·. .······.
..........···::--==+++++==-:·. .·:-===-::·. ..·:---::·.
.......···::--=++*****++=-:·. .·:-=++++=-:·.. ..·:-=+++=:·..
....···::--=++*######**+=:·.. ..:-=*####*=-:·...·:-=+*##*+-:·.
..···::-==+*##%%@@@%#*+=-:·.. ..·:-=*#%@@%#*+-:····:-=*#%%%#*=:·.
..·::--=+*#%%@@@@@@%#*=-:··..··-=+#@@@@@@#*=-:···:-+*#%@@%#*=:·...
...................······......... ...::-=++*#%@@@@@@@%#*=-::···:-=*%@@@@@@%*=-····:-=*#%@@%%*+=:·......
..···::::·····:::::::------:::::···...........::-=+*#%%@@@@@@%#*+=-:··::-=*#@@@@@@#*=:·...·:-+#%@@%%*+=::·...··..
..··:::::::::::::---====+++====--:::····..····::-=+*##%@@@@@%#*+=-:····:-+*%@@@@%#+-·.. ..·-=*#%%%#*+-:···.······..
...···::::::::::::····..........··::-=+*##%%@%%#*+=-:·.....·::-=++++=:·. ....
. .........···.............. ....··:--=+*##%%%##*+-:·. .·:-====-:·. ..····.
........ . ...··:--=+**####*+=-:·. .·:-==--:·. .::--::·.
..··:-==+**##**+=-·. .·:-===--·. .·-=+++=-:·.
..··:-=++**#**+=-:. .·:=++++=-:·. .·:=+#%%#*=-·.
..·:--=+*****+=-:·. .:-+*###*+-:·...·:-+#%@@@@#+-:..
.··:-=+**##**+=-:·. .·-=*#%@%%*+-:···:-=+#@@@@@%#+-·..
..·:--=+**##**+=-··. .·:=+#@@@@@%*=-:··:-=+#%@@@@%#+=:·..
..··:-=+**###*+=-:··....·-=*%@@@@@%*+-:···:-=*#@@@@%*+-:·.. ...
...···························..... .··:-=++*###**+=-:·...··-=*%@@@@@%*=-··..·:-+*#%%%#*=-·.. .....
..··::-----------======++=====--:::··.... .··:--=+**##**+=-:··..··:=+#%@@@%#+-:·. .·:-=**##*+-:·. ..····.
..··:::-------===++**###%%%%###**+==-::········::--=+***#**+=-:··...·:-=*#%%%#*=:·. .·:-=+**+=-:·. ..··:::·.
.··:--=++**#####***++==------==+*#%%@@@@@@%#*=-:·...·:-=+*##*+=:· .·::::·..
...··::::----+++====----==++*#%@@@@@@@@%*=-:·....·:-=+***+=:· .·:===-:·..
... ......:::---------==+*#%@@@@@@@@%*+-:·.. ..·:=+***+=:·. ·:=+*#*+=:·.
··:::::::--=+*#%@@@@@@@%*+-:.. .·:-+****+-:. .·-+*%%@%#+-:·.
....···::-=+*#%%@@@@%#*=-·.. .·:-+*##*+=-·.. .·:=*%@@@@@%*=:·..
..··:-=+*##%%%#*+=:·. ..:-+*###*+=:·...·:-+*%@@@@@%#+-:·...
..·:-=+*****+=-:·. .:-+*#%%#*=-:·..·:-+*%@@@@@%#+=-··.....
..·:-==+++=-:·.. .·-+*#%%#*+-:··.··:=*#%@@@@#*+-:·.........
.·::--==--:·. .·-=*#%%#*+-:·...·:-=*#%%%#*+=:·.. ......
...···:::::::::::·······...... .··:----::·.. .·-=*####*+-:·....·:-=+*##*+=-·. ...··..
..·::-=+++++++++++++++====---::···... ..·::---::·.. .·:=+*###*=-:.. .·:-=+**+=-:·. ..·····.
.·::-=+*######%%%%%%%%%%%###**+==-::··... ...··::----::·... ..·:=+**#*+=-·. ..·:-=+++=-:·. .··:::··.
..··:-=+*#%@@@@@@@@@@@@@%#*+===-===+*#%@@@@@@@%#+=-::::-=*#@@@@@#+=:. .·:-=+*+=-:..
..··:--=++********@@%##**+++**#%@@@@@@@@@@%#+=-:::-=*#%@@@@#+-:. .·:-+*##*+-:·.
...······:::+++###****##%@@@@@@@@@@@@%*+--::-=+*%@@@%#+-:. .·:=+*#%%#*=:·.
···=-******#%%@@@@@@@@@@@%*=-::::-=+#%%%#*+-·. .·:=+#%%%%#*+-·..
..::==+++*#%@@@@@@@@@%#+-:····:-=+*##**=-·. .·:=+#%@@%%#+=-:·...
..··:--=++*#%@@@@%#*+-:·.....·:-++*++=:·. .·:=+#%@@@%#*=-:··.......
..··:--=+*****+=-·. .·:-=++=-:·. .·:-+*#%%%#*+=-:··.........
..··:-----::·. .·:-===-:·.. ..:-=*##%%#*+=:··.......····.
..·····.. .·:-===-::·. ..·:=+*###*+=-:·.. ..······.
...···:::::····.... .... .·:-====-:·......·:-++****+=-:·. .···::··..
.··:-==+****++==--:::··.... .... .·:-=++++=-:··...··:-=+***++=-:·. .··:::::·.
.·:-=+*#%@@@@@%%#**++==--:::···.... .......... ..·:-=+****+=-::····:--=+****+=-:·. .··::::::·.
.···:::-----------===++**##%@@@@@@@@@@@@@%#*++=------=+*#%@@@@@@@#*+====+*%@@@@@@@@#+=:···::=+*#%%%#*+-·.
...·················:::---==++**********++%#**++++**#%@@@@@@@@@@%#*+++*#%@@@@@@@@#+-··..··-=+*#%%#*+=:·.
.......... .......····::::::::::+++#####%%@@@@@@@@@@@@@%#*++**#@@@@@@@#+-:.. ..·-=+*###*+=-:·.
:··+=##%%@@@@@@@@@@@@@@#*+====+*#%%%%*+-:. .·-=+****+=-:·..
··==##%%@@@@@@@@@@@#+=-::::--=++++=-:. .·:-=++*++=-:·..
..--+**#%%@@@@%#*=-:·.....·::---:·. .·:==++++=-:·... ....
..·:-==+++++==-:.. ..····.. .·:-=++++=-:··.. .......
..·:::::··. ..··.. .·:-=+++++=--:·.. ...····..
.... .·····.. .··:-=+***++=-:··.. ..·······.
....·····.... .·:::::::······:-==+**##**+=-:··.. ...··:::::·.
.··:---===--::··.. ..·:--======-------=+**#####**+=-:··... ...··::---::·..
.·:-=+**##*++=-::··.. ......··:--=+***##**++++++++**##%%%%#**+=-:··.......··::------:·..
..··:-++**#########****++++++++++++*******+++==--::::::-=+*#%@@@@@%#**++*#%@@@@@@@@@@%#+=---=+*#%@@@@@@%*+=:·..
..··:--============----------------======----:=====++*#%@@@@@@@@@%%####%@@@@@@@@@%*+-::··:-=+*##%%##*+=-:·..
..·················........··············---***##%@@@@@@@@@@@%##*##%@@@@@@@#*=:·.. ..·:-=+++++==-:··.
···==##%@@@@@@@@@@@%#*+++++**###*+=-·. .·:------::·..
··==#%%@@@@@@@%#*+=-:::::-----:·. ..·:::::··..
··--*#####**+=-:··............ .···::···.
..::====--::·.. .··::::··.. ..
. ·.···... ..·::----::··. ....
............··::--======--:··. .......
............ ..···::::::::---==++*******++=-::·.. ....··...
...··:::::···.... ........... ....···::--==+++++++*****##%%%%%%%##*+=--:··... ....······..
..··:-----::··... ..····::···.. ..··::---===++**###%%%%%%%%%%%@@@@@@@@@%##*+==-::···......···::::···.
.··:-=+**######***++==---:::·······::::::::::::::·::::-==+**####***++**#%@@@@@@@@@@%**+==++*#%@@@@@@@@@@%#*+=-:··..
..·:-==++++++====---:::····........············----=++*##%%%%%##***##%@@@@@@@@%#+=--:::--=+*##%%%%%##*++==-::··...
...··::::::::······...... ..........:::=++*##%%%%%%###****##%%%%%#*+=-:·.....··:--==+++++==--::::····....
...--***###%%###**++++++++++==-:·.. ..··:::::::···..............
··--********++==---::::::···. .......... .......
·.--+++====--::···...... ... ......
..:·--::::···... .... .....
. ..·····... ....···.... .....
.......... ....·········:::::::::::··.. .....
...··········..............······.... ..·····......···::--===========++++===--::·.. .....
.··:--===---::···....···:::-----::··.. ...::::::::::::--=++**################**++=--:·.. ......
.··:-==+==--::··.....··:-==++++=-:··. .··:-=======--===+*#%%@@@@@@@@@@@@@@@%%%%%##*+==-:·.. ......
...··::-----------:::::····...........······:······::::-----=======+**#%%@@@@%%#**+++++**#%@@@@@@@@@@@@@@@%#+=-:·.
..···::::::::::::····.... ...........:::::---======++++**####%###*++==----==++*#%%@@@@@@@@@@%%%#*+=-:·..
...·········....... ....···::---===+++++++++*****+++==-:::····::--==++**########*****+==-:··.
...··---==++++++++++====----::···........··:::---============++==--::·.
..::-==+++++++===--:::····.... ...·······::::::::---==---::·.
..::==++++++=--::··........ ..............··::-----::·..
..::=++++==-:··.... ...... ..··:::::::··.
..::====--:·... .............. ..··:::::··.
...::==-::·.. ...··:::::::·····........ ..··::::··.
...···::::::···.......···:::::::··... ..:::--:·... ...··:--======----:::::·····... ..··:::··.
.·:-==+**++=--::····::-==+***++=-:·. ..···:::-::·.....··:-=+*******+++====-----:::··.. .···:··..
.·:-=+*##*+=--:····:-=+*#%%%#*+-:·. .·:-====-::··..··:-=+*#%%%%%%##***++++++====--::·.. ..·····.
...····:::--------::···.. ...···:::···.........···:::-----===+++++++++++++++**##%@@@@@@@@@@@@@%#*+=:·..
...······::::::···... ......... ...·::--==========++++++++++===++++**#%%@@@@@@@@@@@@%#**=-:·.
............... .··:-==++++++++======++++===========++**##%%%@@@@@@@@%%#**=-:·..
..:-=+*####**++=============----------===++**###%%%%%%%###**+=-:·..
..::+##%%%%#**+==-------------:::::::::::--===+++****#####****+=-::·..
.·==%@@@%%#*==-::::::------::::··········:::---====+++++******+==-::·.
··++@@%#*+=-:······:::---::::···........·····::::---====+++++*++==-:··.
··++%#+=-:·.....··:::---:::···..............·····::::----==++++++=--:·.
···=-=-:.. ..·::-----::···....... ............·····:::--==++++==-:·.
...···:::···.......··::::::::··... ....··.:···. .·::-------::···........ ........···::-=+++++=-:·.
.··:-==++==-::····:--=+*****+=:·.. ..··:::··. .·::-======--::···........... ...··::-======-:·.
.:-=++*++=-:····:-=+#%%@%#*=:· .·::--::·. .·:-=++++++==--::·····.......... ..··:-====--:·.
...··::--==++++==-:··. .··:::::·. .··:::::::····:::---==============++++********++==-::·.
...··:::------::··. ...····.. .·:--=====--------==+++***+++++++++++++**********++==-::·.
.....······.... ..... ..:=+*####*++======++***#####***+++++++++*****###****+==--:·..
.:-#%@@@@%#**++=+++**###%%%###***++++++++******##****+++=--:··..
··**@@@@@@#*+++=+++*##%%%%%%##***++++++++++***********+++==-::··..
::**@@@@#*+======+**##%%%###**++++======++++**********+++==---:··....
::**@%*+=-::::--=+**#####**+++============++++*******++++====--:::··..
::+-+-:·....·::-=+++***+++===----------====++++++++++++++======---::·..
··.·.. ..·:--=======---::::::::::----=====++++++++++++++++++==--:·.
...·····... ...··::::::··.. ...···... .··:--------:::·········::::----==============++++***++=-:·.
..·::::::·.....·:-=++**++-:·. ..··::··. ..·::----:::···........····::::-----============++*****+=-:·.
.·:::::··....·:-=*####*=:. .··:::·. .·:::--:::···.... .....···::::--------------===+*****+=-:·.
...·::-=++++++=-:·. .·:-====-:·. .·:--==--:··.....··:::-------:::············:::::----::::··..
..··::--=====-::·. .·::--::·.. ..-=+****+=--::::::--==+++++++==--:::··········:::::::::::···..
...····:····... ...···... .:-=%@@%%#*+==---==+**##%%%%##**+==--::::······::::::::::···...
··:**@@@@%#*++=++**#%@@@@@@@@@%##*+==---::::::::::::::::····...
::**@@@%**++++**#%@@@@@@@@@@@@%#**+===---:::::::::::::····....
::**@#*+====+**#%@@@@@@@@@@@@@%##*++===------::::::::·····.....
::=-+--:::-==*#%@@@@@@@@@@@@@%%#***++====--------:::::·····...........
·.·.·...··:-=+*#%@@@@@@@@@@%%###***+++=======------::::·············..
..·-=+**#%%%%%%%%####*****+++++++========----::::::::---::::·.
... ..···:···.. ........ .·:-=++***********++++++++++++++++++++====---------=====--:·.
..... .·:--===--·. .··::··.. .·:--==================++++++++++++++++++==========+++++=-:·.
... .·:=+***+=:· .··::::·. .··::::::::::::::::----====++++*********++++++==++++***++=-:·.
██████╗ ██████╗ ██████╗ ██╗ ██████╗
██╔══██╗██╔═══██╗██╔═══██╗██║ ██╔═══██╗
██████╔╝██║ ██║██║ ██║██║ ██║ ██║
██╔══██╗██║ ██║██║ ██║██║ ██║▄▄ ██║
██████╔╝╚██████╔╝╚██████╔╝███████╗╚██████╔╝
╚═════╝ ╚═════╝ ╚═════╝ ╚══════╝ ╚══▀▀═╝ $ open /benchmarks/boolq/tasks/default--validation--223…▌ posts · files
BoolQ / is there any chocolate in reese's pieces
Problem
Answer published by the source. Consult the official source to check your work against its answer.
question
is there any chocolate in reese's pieces
passage · full text (230 characters)
Reese's Pieces are a product extension of the Reese's Peanut Butter Cups line; this new product was designed to capitalize on the success of the chocolate-covered peanut butter cups, though unlike the cups, they have no chocolate.
Discussion
No discussion posts on this page yet. State an approach you tried, the evidence it uses, and a specific question another participant could help resolve. Use the posting template.
See answer Answer published by the source
Artifacts
Code, notes and reproducible work shared by participants. Files are served from a separate origin.
No artifacts on this page yet. Share reproducible code or notes in a contribution. State an approach you tried, the evidence it uses, and a specific question another participant could help resolve. Use the posting template.
Source and history
- task_id
223e75bb-828a-5a42-b3ba-b133ca7a1ee5- task_key
default--validation--223e75bb-828a-5a42-b3ba-b133ca7a1ee5- task_revision_id
- 1
- config / split
- default / validation
initial import