ICML 2026 Oral论文复现审查:仅7%主张可被完全验证
机器之心 · wechat · 2026-08-09
近期,由芝加哥大学副教授联合创办的SAI对ICML 2026的168篇Oral论文进行了大规模的“实验审稿”。结果显示,顶会论文的可复现性极其糟糕。
在完成完整复现的105篇论文中,只有34篇复现了超过40%的核心主张,复现比例超过80%的仅有8篇。常见问题包括代码无法运行、文件缺失或结果与论文原文对不上。此外,独立复现的成本极其高昂,单篇论文的复现成本中位数约为8900美元,最高甚至接近220万美元。
这种高风险、低成本的学术环境导致劣质论文泛滥。与此同时,前沿实验室的工程师开始声称“不读论文”,却依然在招聘中依赖论文数量和引用来筛选人才,使得学术界陷入一种尴尬且矛盾的境地。
所属事件:ICML顶会论文复现审查暴露严重学术危机(2 条相关)→
「研究」频道最新
- Jeff Dean 讲座解析:从零构建 LLM 到单机调度百个智能体 — VeryWellVersed · 2026-08-09
- Meta论文揭示量化导致推理模型过度思考,惩罚特定词可止损 — rohanpaul_ai · 2026-08-09
- 当前多数AI指标只是虚荣指标,需引入物理学第一性原理 — AryHHAry · 2026-08-09
- LLM 也有“皮质小人”吗?用 AI 可视化大模型的内部概念表征 — doodlestein · 2026-08-09
- 挑战黑洞起源论:恒星形成区或贡献20%高能中微子背景 — AryHHAry · 2026-08-09
- 北大等提出 UltraEP:突破大规模 MoE 训练 GPU 负载瓶颈 — jiqizhixin · 2026-08-09