RECLAIM 预印本:最佳 AI agent 仅复现 41% 有代码论文结果
VraserX · x · 2026-09-29
作者引述新预印本 RECLAIM 的发现,指出值得付费的 AI 科学家应该把大量时间花在核查别人的结果上。
- 在代码、数据与权重公开的论文层级中,表现最好的 agent 仅复现了 41% 的结果
- 没有代码可用的论文,最佳复现率只有 15%
- 一个常见失败模式:agent 直接按论文描述实现方法,却不去核对论文里报告的数字
作者据此提出观点:一个主要工作是复现已有研究的 AI 实验室,他会愿意资助——因为验证他人结果正是当前 AI 科研能力的真实短板。
「漫话AGI」频道最新
- Quintin Pope 谈 AI 夺权风险:廉价微调反而削弱 AI 集体协作 — QuintinPope5 · 2026-09-29
- 当野心大到买星系与数字后代遍布宇宙，EA 圈为何集体沉默 — abhiadesai · 2026-09-29
- Miles Brundage 自省:低估智能爆炸是近年最大认知错误 — Miles_Brundage · 2026-09-29
- Anthropic 营收曲线被做进「图表犯罪博物馆」:时间轴间距严重失真 — infoxiao · 2026-09-29
- 用 AI 越多越要读纸质书:开发者称「AI 脑腐」真实存在 — alexcovo_eth · 2026-09-29
- JoshPurtell:人类平等道德价值是规定出来的,不是真信 — JoshPurtell · 2026-09-29