研究者泼冷水:模型改权重很酷,但离真正的自我改进还很远
paul_cal · x · 2026-11-03
AI 研究者 Paul Calvano(paulcal)就近期引发 5 万点赞的「模型自我改进」热议话题发布长评,指出该话题存在大量夸大:
- 模型能读写权重确实是真的:最近的模型在某些玩具级问题上可以在不借助工具的情况下读取和写入模型权重,这一能力会加速发展并最终变得重要。
- 但对自我改进贡献有限:大模型找到并修复小模型的具体缺陷,本质是 bug fixing,并不是 RSI(递归自我改进)的形态;且所有大结论都缺乏合格的基线对照。
- 关键质疑:人类做前沿 AI 并不直接看权重,模型操作权重是否真是通往自我改进的关键路径并不清楚。
- 他同时认可趋势:自我改进的轨迹确实在来,真正的问题只是它是否、以及多久之内会局限于高可验证性领域。
「漫话AGI」频道最新
- Anthropic 与 OpenAI 收购企业运营数据,中小公司陷入囚徒困境 — dbasch · 2026-11-03
- 评论:AI 自动化一切智力工作后,人的核心价值是判断力与主动性 — sqcai · 2026-11-03
- AI 时代写作与阅读更值钱:写好提示词靠品味而非规格说明书 — dreamwieber · 2026-11-03
- 研究员提醒:可解释性「革命」远没有社交媒体说的频繁 — tallinzen · 2026-11-03
- AI 公司尽调翻车实录:ARR 420万美元「自研大模型」实为 GPT-4o 加提示词 — alex_verem · 2026-11-03
- 投资人反驳 AI 泡沫破裂论:与 2000 年不同,模型使用量仍在增长 — robleclerc · 2026-11-03