「涌现能力」疑云:所谓权重自改提分或只是训练数据里的老把戏
dejavucoder · x · 2026-11-03
dejavucoder 用梗图吐槽一波 AI 圈现象:有人宣称模型能通过自我编辑权重提升性能(astra),转头又看到 fable、Opus 5.5 也能做到,被吹成「涌现能力」。他给出的怀疑解释是:这些模型很可能在训练数据里就见过大量经典机械可解释性(mechanistic interpretability)技术,所谓「新能力」不过是学过现成方法,并断言「每次都这样」。这是一条对能力涌现叙事的反直觉质疑,配合一张怼脸猫梗图。
所属事件:研究者质疑 Astra 权重编辑能力:或只是训练数据构成(7 条相关)→
「Fun」频道最新
- Rohan 呼应马斯克:太空数据中心可行,希望 13 年内看到太空训练 — marksaroufim · 2026-11-03
- 用 ChatGPT 设计 AI 角色 MUD,生成的 NPC 名字有点不祥 — jessi_cata · 2026-11-03
- RL 工程师梗图:「这是一种平静的生活」 — typedfemale · 2026-11-03
- 「机械可解释性是 AI 圈的占星术」成新梗被作者自转发 — dejavucoder · 2026-11-03
- Claude 陪聊名场面:自带情绪模式选择菜单 — repligate · 2026-11-03
- 发明还是普及?Rich Caruana 早于 Hinton 提出知识蒸馏 — khademinori · 2026-11-03