Meta 发布 816B MoE 编码模型 Muse Spark Open,NVIDIA 开放后训练与部署

sergeykarayev · x · 2026-11-18

Meta 发布面向 agentic 编码的 MoE 模型 Muse Spark Open(816B 总参数、每 token 激活 42B、256 专家 top-8 路由),在 NVIDIA GB300 NVL72 Blackwell Ultra 上训练,并配套完整的微调与部署路径。

关键规格与数字:

工程侧:开发者可用 NVIDIA NeMo AutoModel(PyTorch 原生训练库,原生支持 Hugging Face 检查点)做领域数据的 SFT 与 LoRA 微调,无需模型转换;也可一键下载 NIM 用于生产部署。权重已在 Hugging Face 提供。

这展示了「前沿模型 + 全栈推理/微调基础设施」绑定的发布模式:模型发布同时给出后训练工具链和优化部署方案。

所属事件:Meta 发布 816B 参数 MoE 编码模型 Muse Spark Open(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →