DeepSeek V4.1 Flash 多模态:45T 图文 token 预训练加模态级负载均衡
nrehiew_ · x · 2026-09-11
nrehiew 解读 DeepSeek V4.1 Flash 第一个架构差异——多模态:
- 用 45T 图文 token 预训练
- 自研图像编码器
- 模态级 load balancing
最后一点让人联想到原始 Chameleon 论文:不同模态的 token 可能相互竞争与干扰。
所属事件:DeepSeek V4.1 Flash 技术报告流出：死磕 KV cache 压缩(44 条相关)→
「模型」频道最新
- 前 Google 研究员团队发布 Fern 0.1:专供审计数据、调试训练的模型 — bneyshabur · 2026-10-26
- Fern 0.1 智能体基准首秀:SWE-Bench Verified 73.4,与前沿模型仍有差距 — bneyshabur · 2026-10-26
- Fern 团队提出「上下文即智能」:预测精度随上下文增至 1000 万 token 持续提升 — bneyshabur · 2026-10-26
- Mirendil 发布首个自研预训练模型 Fern,上下文最长 1000 万 token — bneyshabur · 2026-10-26
- 网友发现 Claude 疑似上线专用翻译界面 — BLCNYY · 2026-10-26
- 用户实测 GrokBot:订机票、网购全被拦,几乎办不成事 — lucasmeijer · 2026-10-26