可解释性讨论:参数量增长带来的是'更致密耦合'还是'单纯更多组件'?

JacobHHilton · x · 2026-10-18

一场关于可解释性随规模变化的技术讨论。@banburismus 指出讨论中混淆了参数量增长的两个不同问题:

banburismus 认为若 (1) 成立会是可解释性的真正障碍,因为它让解释单个单元(如单个神经元)变得困难;而 (2) 不是问题——多花 token 就能覆盖。JacobHHilton 表示认同这一区分,并展开系列回复。

所属事件:ARC研究员发难:可解释性远未解决,模型越大越难懂(30 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →