神经元单义性推论:模型实体知识量被神经元总数封顶?

JessicaRumbelow · x · 2026-10-18

JessicaRumbelow 发起一条引发可解释性圈讨论的问题:如果 MLP 神经元真是单义/单功能的,是否意味着模型知道的实体数量受神经元数量上限约束?

后续讨论中,luciaquirke 提出组合式表征的解释(实体由可组合概念的神经元叠加激活,而非独立实体神经元),JessicaRumbelow 最终总结:这大概是组合性/可组合性问题——神经元数量巨大,组合空间极大,无需为每个实体单独设神经元,只需覆盖每个可组合部分。

所属事件:MLP 神经元单义性之争:模型知识量是否被神经元数封顶(8 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →