GSM8K(Grade School Math 8K)是OpenAI研究者于2021年发布的数学应用题数据集,包含约8500道由人工编写的小学水平题目,每道题需要经过2到8步基本四则运算才能解出。每道题都附有用自然语言写成的分步解答和最终答案。
它被广泛用作衡量语言模型多步数学推理能力的基准测试,也是思维链(chain-of-thought)等提示技术研究中常用的评测对象。
GSM8K是一项基准测试,用约8500道小学水平的数学应用题衡量语言模型的多步数学推理能力。
GSM8K(Grade School Math 8K)是OpenAI研究者于2021年发布的数学应用题数据集,包含约8500道由人工编写的小学水平题目,每道题需要经过2到8步基本四则运算才能解出。每道题都附有用自然语言写成的分步解答和最终答案。
它被广泛用作衡量语言模型多步数学推理能力的基准测试,也是思维链(chain-of-thought)等提示技术研究中常用的评测对象。
本条目依据AIPOST的文章与广为人知的事实整理。如有错误,请通过更正请求告诉我们。
来看附加在数学题末尾的三种结尾语,它们在谷歌PaLM 2模型上用GSM8K数学基准做了测试。
阅读文章百科说明依据AIPOST的文章与广为人知的事实整理。如有错误,请通过更正请求告诉我们,我们会核实并修改。新文章中出现的名称会在文章发布后加入百科。