PatiGonit22K: A Comprehensive Dataset for Solving Complex Bengali MWPs
本文介绍了 PatiGonit22K,这是一个包含 22,441 个经过标注的孟加拉语数学应用题的全面且具有文化适应性的数据集,旨在推进低资源语言在数学推理和教育自然语言处理领域的研究。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一个这样的世界:计算机就像是才华横溢、求知欲强的学生,它们几乎可以阅读地球上的任何语言,但在处理那些它们没怎么学习过的语言中的数学应用题时,却显得力不从心。这就是“自然语言理解”的游乐场——这是一个研究如何教会机器不仅能识别单词,还能理解单词背后隐藏的故事以及这些故事所描述的数字的科学分支。长期以来,这些计算机学生在英语和中文方面有很多练习册,但对于像孟加拉语这样由数亿人使用的语言,其图书馆几乎是空荡荡的。由于缺乏足够的练习题,计算机无法学习如何推理出一些棘手的问题,比如:“如果瑞秋买了7把椅子和3张桌子,每件家具组装需要4分钟,那么整个工作需要多久?”这篇论文正步入那座空荡荡的图书馆,旨在构建一本全新的、大规模的练习册,专门用于帮助计算机变得更擅长解决孟加拉语中的数学谜题。
这篇论文的作者们是来自孟加拉国达卡大学的研究团队,他们注意到虽然之前已经存在一个孟加拉语数学问题集,但它有点过于简单了。这就像是一个只有轻量哑铃的健身房;它能帮助初学者,但无法锻炼出计算机进行重体力劳动所需的肌肉。为了解决这个问题,他们推出了 PatiGonit22K,这是一个包含 22,441 道数学应用题的新型、扩展后的数据集。把这个数据集想象成一个巨大且经过精心策划的谜语宝库。该团队并非只是简单地复制粘贴;他们对现有的题目进行了极其细致的翻译,以确保孟加拉语的表达自然且符合文化习惯,随后又加入了一大批全新的、复杂的挑战。
PatiGonit22K 的真正魔力在于其难度的组合。该数据集分为两个主要组别:5,412 道涉及单一数学运算(如仅加法或仅减法)的“简单”题目,以及高达 17,029 道需要同时处理多种运算(如先加法,再乘法,最后除法)的“复杂”题目。这种平衡至关重要,因为它允许研究人员测试计算机是只能处理基础算术任务,还是会在问题变得复杂时迷失方向。研究人员通过一个双语专家团队验证了每一个题目,以确保数学逻辑正确且语言表达清晰,并剔除了任何令人困惑或重复的条目。
这意味着什么?论文指出,通过提供这个更大、更多样化的题目集,研究人员终于可以训练并测试人工智能模型,以观察它们对孟加拉语数学的理解程度究竟如何。之前的研究表明,模型可以高准确度地解决简单的孟加拉语问题,但这个新数据集推向了更高的边界,旨在测试它们是否能够应对现实生活中常见的那些更难的多步解题过程。作者将该数据集呈现为一个强大的新基准,即一个衡量未来 AI 模型表现的标准尺。他们并不声称已经永久解决了 AI 推理的问题,但他们为科学界提供了一套更好的辅助轮和一个更艰难的障碍赛场,以确保下一代 AI 能够真正通过数学逻辑来思考孟加拉语的应用题,而不仅仅是猜测答案。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。