vLLM 为 Reflection Beam 提供 Day-0 RL 支持,LoRA 解码吞吐提升 62%

vllm_project · x · 2026-10-16

vLLM 项目宣布与 SkyRL 合作为 Reflection 的 Beam 模型提供 Day-0 强化学习支持,涵盖 LoRA、BF16 全量微调与 MXFP8 RL,使用 vLLM rollout 和 Reflection 的 Megatron-Bridge 实现。通过在 vLLM 中合理设置 expert adapter 尺寸,LoRA 解码吞吐从 276 提升至 447 tok/s/GPU(+62%,32 并发、PP2×TP8,仅解码指标)。图示还给出初步 DPPO 验证:AIME25 avg@8 从 61% 提到 79%(50 步训练,LoRA 用 4×8-B200,全量微调用 8×8-B200)。R3 支持流水线并行,权重同步期间保留 FP32 router 权重。

所属事件:vLLM 为 Reflection Beam 提供首日支持与全套优化(10 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →