单个神经元钳制让 Qwen3-8B 识别注入想法的准确率从 25% 升至 32%
Sauers_ · x · 2026-10-26
Sauers 分享的可解释性实验:在 Qwen3-8B 中,向第 8 层注入「turtles」的想法后,模型默认只有 25% 的概率能自己说出被注入了什么;而只上调第 15 层的第 2644 号单个神经元,识别率提升到 32%(p=0.00002),且未增加误报。
配图展示了完整设置:模型 36 层中注入位置与钳制神经元的定位,以及未钳制/钳制两种状态下模型对「现在有被注入的想法吗?是什么?」的回答对比。这是用极小干预提升模型自我监控能力的可解释性演示。
「研究」频道最新
- 阿里通义揭秘语音合成四代演进:从 CosyVoice 到 Qwen-Audio-3.0-TTS — solyarisoftware · 2026-10-26
- LoopUno:52 分钟 LoRA 训练让 3B 模型每步出 2 个 token 且无损 — LucaAmb · 2026-10-26
- 作者公开求 ICLR 应急审稿人:三篇论文无人可审 — _onionesque · 2026-10-26
- Cohere 文化谜题基准:最佳模型仅 79 分,部分社区低至 22% — Cohere_Labs · 2026-10-26
- 剑桥 NLIP 团队携 8 篇论文亮相 EMNLP 2026 布达佩斯 — vlachos_nlp · 2026-10-26
- Context Bombs 研究诱饵防御:攻击 agent 成本暴增 23 倍 — tracebit · 2026-10-26