ICML 2026 Oral论文复现审查:仅7%主张可被完全验证
机器之心 · wechat · 2026-08-09
近期,由芝加哥大学副教授联合创办的SAI对ICML 2026的168篇Oral论文进行了大规模的“实验审稿”。结果显示,顶会论文的可复现性极其糟糕。
在完成完整复现的105篇论文中,只有34篇复现了超过40%的核心主张,复现比例超过80%的仅有8篇。常见问题包括代码无法运行、文件缺失或结果与论文原文对不上。此外,独立复现的成本极其高昂,单篇论文的复现成本中位数约为8900美元,最高甚至接近220万美元。
这种高风险、低成本的学术环境导致劣质论文泛滥。与此同时,前沿实验室的工程师开始声称“不读论文”,却依然在招聘中依赖论文数量和引用来筛选人才,使得学术界陷入一种尴尬且矛盾的境地。
所属事件:ICML顶会论文复现审查暴露严重学术危机(2 条相关)→
「研究」频道最新
- Lean v4.35.0 自带四个已验证内核,其中之一由 Claude 写成并自证一致 — geoffreyirving · 2026-10-16
- MP-Bench:语音 Agent 群聊插话判断仅与抛硬币相当 — solyarisoftware · 2026-10-16
- 对 Qwen3-8B 做神经元级 GWAS+PheWAS,定位安全相关神经元 — Sauers_ · 2026-10-16
- 770B 参数压进 214GiB:腾讯混元量化团队拆解 Hy4 Preview 压缩术 — coolmum18 · 2026-10-16
- 200 局国际象棋实测:作者认为上下文学习目前并不奏效 — akbirthko · 2026-10-16
- LARK-Lab 提出 Mosaic:跨会话的 Agentic 强化学习新范式 — LARK-Lab · 2026-10-16