研究者修正神经元激活解读:超九成神经元激活带可解释含义
builderjaydub · x · 2026-10-20
针对此前广为流传的"搭车客指南神经元"(1% 的 token 即能微弱激活它、激活内容却与《银河系漫游指南》无关),作者指出更准确的表述应是:超过 90% 神经元的强激活带具有清晰可解释的含义。
- 这类概念往往非常具体,例如"观鸟者的天堂""阿波罗 11 号第一步""洗脑神曲"
- 只有 p99.99 以上的激活才谈得上"单一职责"
- 弱激活区乃至未解释的领域依然巨大,单神经元归因不应被过度简化
所属事件:神经网络是否本就干净:多义性假说引发交锋(3 条相关)→
「研究」频道最新
- SFT不该模仿人类答案分布,新论文论证应只学「一个对的答案」 — burkov · 2026-10-20
- 同时激发「上帝」和「猫头鹰」神经元,模型自认 Covenant 之主 — Sauers_ · 2026-10-20
- 攻破比特币所需逻辑量子比特数降至 900 以下 — markjeffrey · 2026-10-20
- Anthropic 研究员勘误:图完整度应称 completeness 而非 faithfulness — JacobHHilton · 2026-10-20
- KAIST 发布人形机器人:12km/h 时速、可太空步与蒙眼平衡 — CyberRobooo · 2026-10-20
- 把影像当问答:多模态模型预测前列腺癌放疗后 24 个月生存率 — maier_ak · 2026-10-20