R1推理速度达150 tps,是DeepSeek的7倍
teortaxesTex · x · 2026-08-16
推文讨论推理性能:R1在Rubin上以约150 tps运行,比DeepSeek官方快7倍,达到峰值吞吐的60%,接近1 t/s/watt。还提到200k是纯推理的下限,若将Flash(约GLM 5.2级别)限制在75 tps,每个NPU可支持约200个agent,一个SuperPoD可支持160万agent。此外,强调完美细粒度可重放性可提供大量训练信号,相当于无限数据机器。
所属事件:GLM 更新节奏与 DeepSeek 算力、推理性能引热议(3 条相关)→
「Infra」频道最新
- 开源 VibeZero:用 agent 一把生成整套可部署的 vibe coding 平台 — cnakazawa · 2026-10-16
- CoreWeave 债务成本大幅下降:DDTL 利差从 S+9.62% 收窄至 S+2.25% — BenBajarin · 2026-10-16
- 软银筹备 SB Energy 与机器人子公司 Roze 美国上市,估值或超 500 亿美元 — nordicinst · 2026-10-16
- TRL 复现 Modal 混合精度 RL 训练:GRPO 150 步崩塌,SC+MIS 稳到 0.72 — QGallouedec · 2026-10-16
- Hugging Face 开源印度语系预训练管线:2.8 万亿 token 数据 — Hugging Face Blog · 2026-10-16
- 英伟达 Vera Rubin NVL72 首批实测:每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16