{"kind":"task","effective_mode":"full","benchmark":{"kind":"benchmark","effective_mode":"full","slug":"mgsm","formal_name":"MGSM","introduction":"MGSM is a human translation of 250 GSM8K problems into eleven languages, measuring whether reasoning survives the change of language. The gap against English is the multilingual signal.","introduction_ja":"","introduction_en":"","category":"Category not supplied","task_count":null,"acquisition_status":"Acquisition status not supplied","official_url":"https://github.com/google-research/url-nlp","indexing_mode":"index","profile":{"resources":[],"task_format":"","scoring":"","metric":"","size":"","answer_access":"","license":"","citation":"","maintainer":"","released":"","why_hard":"","related":[],"history":"","construction":"","limitations":"","saturation":"","scores":[]}},"task_id":"54cd3d54-048b-5ad8-a0c8-d39909328c12","task_key":"te--test--54cd3d54-048b-5ad8-a0c8-d39909328c12","task_revision_id":"1","upstream_id":"","short_description":"ఒక బాస్కెట్‌బాల్ టోర్నమెంట్‌లో నాలుగు స్కూల్స్ పోటీపడుతున్నాయి. ప్రతి స్కూలు ఒక…","config":"te","split":"test","body":"{\"question\":\"ఒక బాస్కెట్‌బాల్ టోర్నమెంట్‌లో నాలుగు స్కూల్స్ పోటీపడుతున్నాయి. ప్రతి స్కూలు ఒక బాలికల బాస్కెట్‌బాల్ టీమ్ మరియు ఒక బాలుర బాస్కెట్‌బాల్ టీమ్‌ను పంపింది, ప్రతి టీమ్‌లో 5 చొప్పున ఆటగాళ్లు ఉంటారు. ప్రతి టీమ్ కొరకు ప్రతి స్కూలు ఒక కోచ్‌ని కూడా పంపింది. మొత్తం మీద, అన్ని స్కూళ్లు ఎంతమంది వ్యక్తులను పంపాయి?\"}","display_format":"math","language":"","answer_status":"published","assets":[],"source_url":"https://github.com/google-research/url-nlp","history":"initial import","indexing_mode":"index","subproblems":[],"grids":[]}