斯坦福 Marin 535B 模型开训,全程公开
udmrzn · x · 2026-08-24
斯坦福教授 Percy Liang 宣布其新模型 Marin 535B-A23B 正式开训,并将整个训练过程向公众公开。该模型拥有 535B 总参数(23B 激活参数),使用 18.75T tokens 数据,动用 11 套 GB200 NVL72(约 792 张显卡),预计训练 3 个月,计算量约 2.7e24 FLOPs。在主模型训练前,团队已完成 4 级 Scaling Ladder(从 1.6B 到 27.7B)以预测状态。现在公众可直接围观实时训练曲线及后续实验记录,这可能是人类公开围观过的最大规模模型训练。
所属事件:斯坦福 Marin 启动 535B 模型全透明训练并开源 23T token 数据(7 条相关)→
「Infra」频道最新
- 铜转光:机架级光背板成 AI 数据中心下一步设计刚需 — BenBajarin · 2026-10-16
- Polymarket 开出 28% 概率:年内将有美国州级数据中心禁令落地 — Polymarket · 2026-10-16
- 宾州居民拒绝每户 1 万美元补偿,抵制亚马逊大型数据中心进驻 — Polymarket · 2026-10-16
- PyTorch 原生跑上 AWS Trainium,零代码改动 — PyTorch · 2026-10-16
- 业内爆料:中国实验室算力仅美国 1/10,字节 2-4 倍价扫东南亚算力 — robleclerc · 2026-10-16
- GPU 优化公司 Zymtrace 融资 1220 万美元,招 ML 工程师打造自主调优 Agent — cfregly · 2026-10-16