重测 50 项 LLM 经典发现：15 个月内大半失效
cephaloform · x · 2026-11-04
斯坦福 James Zou 团队对 50 项被广泛引用的 LLM 行为发现（各类偏见、幻觉等）进行复测，发现 15 个月内大多数结论不再成立或效应大幅减弱——LLM 研究结论的保质期极短。评论者 tallinzen 补充：学生论文常以「语言模型能否推理」为题，实际只是对当时可用的三四个特定模型下结论，这种过度概括正是结论易过时的原因之一。
所属事件:斯坦福重测50项LLM研究结论：15个月内44%失效(7 条相关)→
「研究」频道最新
- Tacit Labs 押注 AI 制药:直接优化药物发现而非建模生物学 — jefrankle · 2026-11-04
- 10月 AI 安全论文精选：从清洁神经元到自然欺骗者 — gasteigerjo · 2026-11-04
- 半个世纪量化股票投资演变综述：LLM 与多智能体被列入新时代 — PtrPomorski · 2026-11-04
- 新论文 Library of Layers:运行时自适应重排 Transformer 层顺序 — Thrumpwart · 2026-11-04
- TAMU 教授用 AI 制作 400+ 页生成模型教程讲义并公开 — ShuiwangJi · 2026-11-04
- 「DeepMind 黑手党」正孵化新一波 AI4Science 公司，牵动英国科研未来 — ersatzben · 2026-11-04