Goodfire 联创长文:神经网络并非乱线团,可解释性远比想象乐观

burny_tech · x · 2026-10-16

Goodfire 联合创始人 Nick Cammarata 发表新文章,重新审视他早年参与的开创性可解释性研究(他合著了提出 polysemanticity 与 superposition 的论文 Zoom In)。

核心论点:早期领域(包括他自己)把神经网络看成需要解开的乱线团是错的。他花数月重访可解释性的经典 model organisms,并研究到万亿参数规模的现代语言模型,结论是 AI 模型的可解释性远超预期。文章还讨论了可解释性领域可能存在的 bitter lesson。

所属事件:前 OpenAI 可解释性负责人长文称神经网络本就干净引热议(24 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →