新论文:Transformer 收敛到不变「算法核心」,跨模型提取

pickover · x · 2026-11-20

Schiffman 的新论文《Transformers converge to invariant algorithmic cores》提出:训练只约束行为而非内部机制,许多权重配置可实现同一函数,研究单个训练好的网络可能只描述了某次训练的偶然性。论文引入 Algorithmic Core Extraction (ACE) 提取跨独立训练模型反复出现的紧凑子空间并做因果验证。主要发现:

所属事件:新论文:Transformer 收敛到跨模型不变「算法核心」(2 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →