vLLM 生态 RL 框架 Vime 原生支持 AMD Instinct GPU
vllm_project · x · 2026-07-17
vLLM 生态系统中的强化学习后训练框架 Vime 现已原生支持 AMD 平台。通过与 AMD 团队合作,Vime 成功在 AMD Instinct MI355X GPU 上实现了端到端的强化学习后训练。
该框架直接使用 vLLM 作为 rollout 后端,无需额外编写 ROCm 专用代码。目前支持 GRPO 训练、Megatron-LM 训练以及 Qwen3 等模型。实测在 MI355X 上,Qwen3-8B 模型的训练吞吐量可稳定在约 4100 tokens/GPU/s。
「Infra」频道最新
- 用 Sail 等价性证明与 riscv-coq 交叉验证 RISC-V 规范,发现真实 bug — xennygrimmato_ · 2026-10-27
- xAI Colossus 1 数据中心 FP64 算力约 14.6 exaflops,达 Top500 榜首 5 倍 — cis_female · 2026-10-27
- Lambda 实测 NVIDIA DSX MaxLPS:同等电力多跑 3 节点,吞吐提升 24% — TheZachMueller · 2026-10-27
- 新播客:Micron HBM 路线图、Meta AI 基建与 NVIDIA 供应链掌控 — BenBajarin · 2026-10-27
- SGLang MegaKernel+PD 发布:高并发吞吐与低延迟兼得,TCO 大幅优化 — AccBalanced · 2026-10-27
- 自托管 Convex 扩容实战:把 TypeScript 函数编译成 WASM — leventov · 2026-10-27