NVIDIA Groq 3 LPX 机架实测:Gemma 4 31B 跑出 3431 tokens/s
IanAndrewsDC · x · 2026-08-25
NVIDIA 宣布 Groq 3 LPX“交互式 AI 推理”机架已全面投产,将于今年晚些时候投入运营。经 Artificial Analysis 私有部署实测,在运行 Gemma 4 31B 模型时,该系统在 10k 和 100k 输入序列长度下均实现了高达 3431 tokens/s 的中位输出速度,这是目前测得的 Gemma 4 31B 在 10 万上下文下的最高速度。
所属事件:英伟达 Groq 3 LPX 全面量产,Nebius 首家上线(18 条相关)→
「Infra」频道最新
- 英伟达携手瑞典 Wallenberg,Launch 共享 AI 超算 Sferical One — nvidia · 2026-10-16
- 基础设施下一站:能自我进化、自我验证的自适应系统 — _shreya_s · 2026-10-16
- 小米 MiMo RL 训练曝光:30 步花掉 347 万美元 — bycloud · 2026-10-16
- Cerebras 用异构 prefill 池喂晶圆级引擎,解码速度与 batch 解耦 — ai · 2026-10-16
- d-Matrix Corsair 机架正式出货,演示 H100+8 XPU 跑出 845 tok/s — ai · 2026-10-16
- Actual 实测 DGX Station 跑出 10k tok/s,推理引擎与 GB300 案例曝光 — natesiggard · 2026-10-16