Modal 实测:混合精度混合加速器采样器跑异步 RL,成本更低且收敛不掉点

Modal Blog · rss · 2026-10-13

Modal 博客报告了在 agentic coding 任务上用全异步 RL 训练模型的实践:采样器采用混合精度、混合加速器(不同 GPU 型号混用)配置。通过 off-policy correction(离策略修正),训练全程保持稳定直至收敛,效果与同构采样器相当,但成本更低。这为 RL 训练中混用新旧硬件、降低算力开销提供了可行路径。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →