消融细节:控制锯齿的是 even/odd 词元,而非 cat 本身

Sauers_ · x · 2026-10-20

作者通过消融实验定位控制机制:把提示词里的「cat」去掉锯齿依然出现,真正必需的是「even」/「odd」这两个词元——模型学到的其实是对「奇偶层」指令的执行回路,cat 只是目标方向。

同时明确局限:该行为不能泛化到其他 cat 探针或 logit lens 的 P(cat),高度贴合训练时用的那个特定探针。

所属事件:研究者训练 Qwen3 内部表征走出锯齿路径(9 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →