单卡 RTX 5090 跑出每秒 6000 万步：PufferLib 5.0 的五种 RL 并行度详解
jsuarez · x · 2026-09-14
jsuarez 详解 PufferLib 5.0 如何在单张 RTX 5090 上突破每秒 6000 万步的 RL 训练吞吐——对多数环境相当于每秒生成数月量的模拟数据。
- 环境数并非刷分：每 GPU 运行数百到上千个环境，数量来自 1000+ 实验的超参扫描，目标是任务性能与真实训练时间的最优权衡。数据公开在 Constellation 仪表盘与本地版本中。
- 并行的两大路径：基于线程的 CPU 并行等（原文截断），文章围绕五种并行度展开。
作者强调可以靠百万环境把数字刷到 1 亿 SPS 以上，但报告的是有用配置下的最大吞吐。
「Infra」频道最新
- 8GB 显卡本地跑 Flux+Wan 2.2：三个设置错误拖慢了所有渲染 — roro9- · 2026-10-30
- Cloudflare 不肯做,开发者自研工具实现 Durable Objects 零停机迁出 — samgoodwin89 · 2026-10-30
- 曝一家未具名机构已建成规模化算力借贷专项载体 — matt_slotnick · 2026-10-30
- 开源模型涨价挤压推理商:5 月以来 GPU 回本吞吐要求涨 25-83% — bookwormengr · 2026-10-30
- Sam Altman 称芯片供应链“看不见的手”失灵，DRAM 是关键瓶颈 — SnoozeDoggyDog · 2026-10-30
- MoEShift 让 24GB Mac 跑 125B 模型：7.5GB 内存、10 tok/s — dave-tro · 2026-10-30