vLLM 表示 prime-rl 在 28 台 H200 上跑万亿级 agentic RL
vllm_project · x · 2026-07-23
vLLM 团队介绍,Prime Intellect 的 prime-rl 0.6.0 正在 vLLM 上跑“万亿级”的 agentic RL。方案里用了 FP8、宽专家并行、prefill/decode 解耦、KV cache offloading,以及 vllm-router 等推理侧优化。
这套系统被用于在 SWE 任务上训练 GLM-5,序列长度达到 131k,并且在 28 台 H200 节点上把单步训练压到 5 分钟以内。帖子还顺带预告了 vLLM Office Hours 的直播,会详细讲 prime-rl 的性能和 vLLM 0.25 的新变化。
「Infra」频道最新
- Anthropic 10 月 ARR 疑似暴涨,年底千亿美元 ARR 有望 — GavinSBaker · 2026-10-26
- 降价即放量:Anthropic 10 月 token 用量暴涨,年底 ARR 或破 1000 亿美元 — GavinSBaker · 2026-10-26
- Alex Banks:电力是 GPU 上线瓶颈,真正的风险是需求先降温 — thealexbanks · 2026-10-26
- 分析师:蚂蚁是当前工作负载最具弹性可置换的模型厂商 — BenBajarin · 2026-10-26
- Anthropic S-1:训练基建优势使单任务成本降40%、营收增速翻倍 — BenBajarin · 2026-10-26
- 研究揭示合成数据最优比例随算力从10%升至32% — heghbalz · 2026-10-26