微软发布 MAI Base 2:80B 激活/2.8T 总参 MoE,预训练 FLOPs 效率超 DeepSeek-V4-Pro-Base 4-12 倍
liuziwei7 · x · 2026-11-16
Microsoft AI 发布研究博客,宣布完成新前沿基座模型 MAI Base 2 的预训练:
- 架构:MoE 基座模型,80B 激活参数、2.8T 总参数;
- 成绩:在其 held-out 评测上超越所有被测的开源权重模型;
- 效率:预训练 FLOPs 效率比最强开源基座 DeepSeek-V4-Pro-Base 高 4-12 倍,节省的算力被用于训练更大的模型;
- 这是继 6 月发布的 MAI Thinking 1(基于 MAI Base 1 后训练的通用基础模型)之后的新一代基座。
研究者 chillchio 评价该方法「works like a charm」,并指出相比视觉编码器方案,训练需要略多 FLOPs,但省去了编码器预训练开销,值得。
「模型」频道最新
- 7 个本地可跑的无审查小模型清单:最小仅 0.67GB — nevrekaraishwa2 · 2026-11-16
- 爆料式推测:Anthropic 或已备好更强模型,AI2 下一代 Astra 值得盯 — haider1 · 2026-11-16
- 编码 agent 用户晒额度耗尽截图:每周用量上限成最大痛点 — Spare-Ad-1024 · 2026-11-16
- 截图爆料:Claude Code 界面现 Opus 5.5 Medium 模型选项 — itsOmSarraf_ · 2026-11-16
- 研究曝百度 ERNIE-5.5 背题:96% HumanEval 泄漏,去污后垫底 — teortaxesTex · 2026-11-16
- 用户吐槽 Grok Code heavy 模式额度两天烧光 — AIFlow_ML · 2026-11-16