研究者论证:模型自编辑权重可消除解释者与目标的能力差距

menhguin · x · 2026-11-03

menhguin 回应权重编辑讨论,指出模型自编辑的吸引力:目标模型与解释模型在同一参数上经历同种前向传播,理论上大幅减少混淆变量空间(他主张解释模型必须看完整前向/反向传播,因此也在研究优化器和反向传播);且用目标模型自身做解释者,规模与能力差距为零,无需压缩。他也认为窄而具体的行为更可能是可开关的「彩票」。

所属事件:研究者探讨让 LLM 自编辑权重的可解释性路线(4 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →