Marin 535B 开源模型启动训练,将耗 2.7e24 FLOPs
DavidBennett__ · x · 2026-08-24
Percy Liang 宣布 Marin 535B-A23B 模型本周开始训练。该项目完全开源,包括代码、数据、配方和实验结果。训练计划在 11 个 GB200 NVL72 集群上进行,耗时约 3 个月,总计算量为 2.7e24 FLOPs,涵盖 18.75T tokens 的预训练和中训练。此前团队已通过 1.6B 至 27.7B 的模型进行调试和预测。
「Infra」频道最新
- Muse-Spark 开源权重发布:816B MoE 模型 MLX 3bit 版已上线 — ns123abc · 2026-10-16
- vLLM 实现 Muse Spark Open Day-0 LoRA RL,AIME 从 0.56 提至 0.85 — vllm_project · 2026-10-16
- Inferact 为 Muse Spark Open 训练 DSpark 草稿模型,一次最多出 7 个 token — vllm_project · 2026-10-16
- Cloudflare Stream WebRTC 低延迟直播正式 GA,可扩展至百万观众 — ritakozlov · 2026-10-16
- YC 孵化 Overshoot 主打推理优化:已帮客户省超 500 万美元 GPU 账单 — ycombinator · 2026-10-16
- Meta 开源 816B 参数 Muse Spark Open,Groq 预览跑出 350+ tokens/秒 — GroqLLC · 2026-10-16