vLLM 用 GB300 NVL72 多节点 DSpark 训练出最快的 Kimi-K3
vLLM Blog · rss · 2026-09-15
vLLM 团队发布工程复盘:如何借助 GB300 NVL72 多节点集群,结合 Speculators 与 Mooncake,为 Kimi K3 训练出速度最快的 DSpark(推测解码/speculative decoding 配置)。文章覆盖多节点推测解码训练的具体实现路径与工程细节。
「Infra」频道最新
- B200/H100 租金周内创新高,年内涨 47% 和 31% — TheZachMueller · 2026-11-02
- vikhyatk:通往奇点路上算力将交替出现过剩与短缺 — TheZachMueller · 2026-11-02
- Mac 端 PyTorch 10 月下载量达 329 万,环比涨 20.5% — LysandreJik · 2026-11-02
- CVSS 9.8 严重漏洞:ingress-nginx 可被未认证攻击者实现 RCE — evilsocket · 2026-11-02
- 内存涨价三倍,特斯拉把 Optimus 大脑内存砍掉三分之一 — aakashgupta · 2026-11-02
- 1.7B 本地模型 LFM3 在 MacBook 上首次答对曼城赛程查询 — NielsRogge · 2026-11-02