斯坦福 Marin 535B 模型开训,全程公开
udmrzn · x · 2026-08-24
斯坦福教授 Percy Liang 宣布其新模型 Marin 535B-A23B 正式开训,并将整个训练过程向公众公开。该模型拥有 535B 总参数(23B 激活参数),使用 18.75T tokens 数据,动用 11 套 GB200 NVL72(约 792 张显卡),预计训练 3 个月,计算量约 2.7e24 FLOPs。在主模型训练前,团队已完成 4 级 Scaling Ladder(从 1.6B 到 27.7B)以预测状态。现在公众可直接围观实时训练曲线及后续实验记录,这可能是人类公开围观过的最大规模模型训练。
所属事件:斯坦福 Marin 启动 535B 模型全透明训练并开源 23T token 数据(7 条相关)→
「Infra」频道最新
- Meta 开源 816B 参数 Muse Spark Open,两台 Mac Studio 即可本地跑 — gabriberton · 2026-10-16
- 黄仁勋做客 BG2 播客:谈 AI 收入能否撑起 Capex 与 2027 瓶颈 — elonmusk · 2026-10-16
- Mistral 本地推理基建机架曝光:DGX Spark、Mac Studio 等混搭 — gregmushen · 2026-10-16
- 英伟达携手瑞典 Wallenberg,Launch 共享 AI 超算 Sferical One — nvidia · 2026-10-16
- 基础设施下一站:能自我进化、自我验证的自适应系统 — _shreya_s · 2026-10-16
- 小米 MiMo RL 训练曝光:30 步花掉 347 万美元 — bycloud · 2026-10-16