looped transformer 中发现「非二元论」神经元等五个概念神经元

burny_tech · x · 2026-10-27

在 looped transformer 中定位到五个承担独立概念的神经元:语音与字母(L18 N3066−)、非二元论(L13 N1680+)、教学法(L4 N2104+)、论坛「已采纳答案」(L6 N3344−)、电子轨道(L18 N1735−)。钳制示例显示,关闭 L18 N3066− 会让新闻文本突然滑向语音学内容,插入 IPA 音标描述——说明单个神经元足以把模型输出带向特定概念域。作者此前也发现过「非二元论神经元」,此帖延续其对模型内部概念表征的解读。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →