爆料称 DeepSeek V4.1 砍掉 V4 补丁:弃 HCA、泛化 CSA、免稀疏预热
zephyr_z9 · x · 2026-09-10
KOL teortaxesTex 爆料称 DeepSeek V4.1 将在架构上全面简化 V4 的临时补丁设计:放弃 HCA,将 CSA 泛化为更通用的原语,去掉稀疏注意力的 warmup 阶段,并采用更简单的单遍 mHC,还提到 Engram 等新组件,称其为「新 Transformer」。
此前该作者曾预言 DeepSeek 会把 V4 架构压缩成更精简的原语集合,认为 DSA 并非极限,真正的架构探索才能跨越「深谷」。注意:属未经官方证实的架构爆料。
所属事件:DeepSeek V4.1 曝 552B 非对称激活架构(15 条相关)→
「模型」频道最新
- 博主实测称小米 MiMo-X-Pro 预览版质量明显领先 DeepSeek V4.1 Flash — Scobleizer · 2026-09-10
- Reddit 用户拆包 safetensors:DeepSeek V4.1 Flash 实为 748B 参数 — DistanceSolar1449 · 2026-09-10
- Kimi K3 上线 RunPod:2.8T 参数、1M 上下文,$3/$15 定价 — Kimi_Moonshot · 2026-09-10
- 一周烧掉3亿 token 仍未触顶,GLM 5.3 额度宽松引热议 — saibharadwaj · 2026-09-10
- 爆料补注:V4 系列或已有 3T 参数模型, Scaling 风险是关键变量 — teortaxesTex · 2026-09-10
- 爆料推算:DeepSeek V4.1 Pro 或为 3.1T 参数 MoE,磁盘占用 2.6TB — teortaxesTex · 2026-09-10