ICML 2024爆火演讲！Meta等揭秘大模型内心世界：不同于人类的2级推理

文章预览

©来源 |  机器之心 大语言模型 (LLM) 是如何解数学题的？是通过模板记忆，还是真的学会了推理思维？模型的心算过程是怎样的？能学会怎样的推理技能？与人类相同，还是超越了人类？只学一种类型的数学题，是会对通用智能的发展产生帮助？LLM 为什么会犯推理错误？多大多深的 LLM 才能做推理？ 论文标题： Physics of Language Models: Part 2.1, Grade-School Math and the Hidden Reasoning Process 论文链接： https://arxiv.org/abs/2407.20311 近日，来自 Meta FAIR、CMU 和 MBZUAI 的叶添、徐子诚、李远志、朱泽园四人团队最新公布 arXiv 论文《语言模型物理学 Part 2.1：小学数学与隐藏的推理过程》用可控实验，巧妙地回答上述问题。推特网友 @xlr8harder 评价，「这一结果将一劳永逸地平息关于 LLM 是否具有推理能力，或者只是随机鹦鹉的争论。」 编者注：《语言模型物理学》全系列 ………………………………