前沿 AI 智能体实测:烧钱跑 6 天仍做不出像样研究
sayashk · x · 2026-07-31
一项最新研究测试了前沿 AI 智能体能否胜任开放式的 AI 研发工作。研究人员引入了“影子评估”方法,让智能体接手两篇未发表的 NeurIPS 2026 论文的核心问题,并给予其 6 天时间和数千美元的算力。
结果表明,尽管智能体能独立完成所有工程代码,但在回答核心研究问题上未能取得实质性进展,最终“论文”被原作者全票拒绝。研究总结了 AI 研究员的五大失败模式,其中最致命的是缺乏对可发表研究标准的判断力。这直接挑战了当前关于 AI 能实现递归自我改进的乐观预测。
所属事件:影子评估实测:AI智能体开放式科研遭原作者全盘否决(12 条相关)→
「漫话AGI」频道最新
- 「2026 年还拒绝用 AI 写代码,就像 2005 年拒绝用 Google」 — prasenx · 2026-10-16
- Bessemer 调查 226 名医疗高管:AI 后台已实现 3-4 倍回报 — AllThingsApx · 2026-10-16
- SAIR 推出 Open Math OS:免费算力+100 工具,要让社区掌控数学 AI — Thom_Wolf · 2026-10-16
- 「人在回路」是 AI 治理最大谎言?人在场不等于人有控制权 — glenbeer · 2026-10-16
- 可解释性研究遭「概念皆任意」式质疑,doomer 阵营默认立场引争议 — basedjensen · 2026-10-16
- 「飞行者还是骗子」:1908 年欧洲质疑莱特兄弟的典故照进 AI 行业 — bennash · 2026-10-16