GSM8K

GSM8K是一项基准测试,用约8500道小学水平的数学应用题衡量语言模型的多步数学推理能力。

1篇文章最近提及

GSM8K(Grade School Math 8K)是OpenAI研究者于2021年发布的数学应用题数据集,包含约8500道由人工编写的小学水平题目,每道题需要经过2到8步基本四则运算才能解出。每道题都附有用自然语言写成的分步解答和最终答案。

它被广泛用作衡量语言模型多步数学推理能力的基准测试,也是思维链(chain-of-thought)等提示技术研究中常用的评测对象。

本条目依据AIPOST的文章与广为人知的事实整理。如有错误,请通过更正请求告诉我们。

涉及该条目的文章

  • AI智能体优化指南:改提示词还是训练权重,如何取舍AI性能 ·

    来看附加在数学题末尾的三种结尾语,它们在谷歌PaLM 2模型上用GSM8K数学基准做了测试。

    阅读文章

发现说明有误或找不到条目?

百科说明依据AIPOST的文章与广为人知的事实整理。如有错误,请通过更正请求告诉我们,我们会核实并修改。新文章中出现的名称会在文章发布后加入百科。