研究者扫 7170 万文档定位单神经元,钳位激活让模型改计划去徒步

builderjaydub · x · 2026-10-17

作者对 L55/N11703 神经元做了可解释性实验:从 7170 万份预训练文档中检索所有含「tornado」语境的文本,用不同长度文本触发 prefill 并采集激活,确认 Colorado 相关概念清晰触发该神经元。钳位(clamping)该神经元也能生效:在 prompt「My plan for this weekend is to」下,将其激活钳到 +300 后,模型输出从看电影变成计划去山里徒步,+300 时与原论文图表逐字吻合,复现了 AU 中的经典案例。

所属事件:扫描 7170 万训练文档,实验定位单一神经元功能(3 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →