Mistral 回归:发布 1T 总参 49B 激活多模态 MoE 模型 Large 4
Xianbao_QIAN · x · 2026-10-29
Mistral 发布新旗舰 Mistral Large 4(Mistral-Large-4-1T-A52B):总参数约 1T、激活约 49B 的多模态 MoE,采用稀疏 MLA 注意力,内置 DSpark draft 模型,支持工具调用与推理。
- 上下文窗口约 104 万 token
- 提供 FP8、NVFP4、AMD MXFP4 权重,已上架 Hugging Face
- 官方数据:8×GB300 上经 DSpark 投机解码,TP4 配置在 32k 输入下达约 241 output tok/s/GPU
所属事件:Mistral 开放万亿参数旗舰 Large 4 权重(27 条相关)→
「模型」频道最新
- Google 承认 AI 搜索变现更弱,股价单日暴跌近 12% — Ars Technica AI · 2026-10-30
- Grok 突然改用阿拉伯语回复,归咎语言设置故障翻车 — dbasch · 2026-10-30
- Ollama 两周模型大盘点:云端上线 Mistral Large 4、DeepSeek v4.1-flash 等 — ollama · 2026-10-30
- 前 OpenAI 安全副总裁 Brundage:Claude Duet 独立 App 的做法不理想 — Miles_Brundage · 2026-10-30
- Phonic 1 语音模型登顶 Artificial Analysis 语音榜,87.1 分超 Grok Voice — ArtificialAnlys · 2026-10-30
- 微调 2B 小模型检测风机缺陷, 准确率从 10% 跳到 67% 胜过 GPT-6 — helloiamleonie · 2026-10-30