爆料称 DeepSeek V4.1 砍掉 V4 补丁:弃 HCA、泛化 CSA、免稀疏预热

zephyr_z9 · x · 2026-09-10

KOL teortaxesTex 爆料称 DeepSeek V4.1 将在架构上全面简化 V4 的临时补丁设计:放弃 HCA,将 CSA 泛化为更通用的原语,去掉稀疏注意力的 warmup 阶段,并采用更简单的单遍 mHC,还提到 Engram 等新组件,称其为「新 Transformer」。

此前该作者曾预言 DeepSeek 会把 V4 架构压缩成更精简的原语集合,认为 DSA 并非极限,真正的架构探索才能跨越「深谷」。注意:属未经官方证实的架构爆料。

所属事件:DeepSeek V4.1 曝 552B 非对称激活架构(15 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →