NVIDIA Groq 3 LPX 机架实测:Gemma 4 31B 跑出 3431 tokens/s

IanAndrewsDC · x · 2026-08-25

NVIDIA 宣布 Groq 3 LPX“交互式 AI 推理”机架已全面投产,将于今年晚些时候投入运营。经 Artificial Analysis 私有部署实测,在运行 Gemma 4 31B 模型时,该系统在 10k 和 100k 输入序列长度下均实现了高达 3431 tokens/s 的中位输出速度,这是目前测得的 Gemma 4 31B 在 10 万上下文下的最高速度。

所属事件:英伟达 Groq 3 LPX 全面量产,Nebius 首家上线(18 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →