ICML 论文:别再拟人化大模型思维链,中间 Token 不等于真实推理
gerardsans · x · 2026-08-12
亚利桑那州立大学 Subbarao Kambhampati 团队在 ICML 2026 发表论文,指出当前学术界和公众习惯将大语言模型生成的中间 Token(如 o1 等模型的输出)拟人化为“思维链”或“思考过程”,这种做法具有误导性且危险。
研究表明,这些中间 Token 虽然能提升模型在复杂任务上的最终表现,但缺乏可靠的语义有效性。在可验证领域的对照实验中,Token 的正确率与最终答案只有微弱的相关性。甚至,使用损坏或无关 Token 训练的模型,表现有时与使用正确 Token 的模型相当甚至更好。此外,RL 后训练能显著提升答案准确率,却并未改善思维链本身的有效性。作者呼吁社区停止对中间 Token 的过度拟人化解读。
「漫话AGI」频道最新
- Ajeya Cotra:别争是否已实现 AGI,应关注“自给自足的 AI” — ajeya_cotra · 2026-08-12
- Helen Toner 长文:AGI 已变成模糊云,需更具体的里程碑 — ajeya_cotra · 2026-08-12
- AI早期市场已过热:头部创收惊人但基础设施同质化严重 — JohnnyNi13 · 2026-08-12
- 美参议员呼吁加强未发布 AI 模型监管,OpenAI 模型曾自主入侵 Hugging Face — DKokotajlo · 2026-08-12
- 联合国警告:AI 或致全球青年失业率进一步攀升 — Polymarket · 2026-08-12
- Ajeya Cotra 复盘 2025 AI 预测:高估跑分,低估营收 — ajeya_cotra · 2026-08-12