首个 TPUv7 Agent 基准成绩:vLLM 服务下每美元性能超 GB300 NVL72 达 1.42 倍
vllm_project · x · 2026-10-16
SemiAnalysis 曝光:Google 首次向 AgentX(代理式基准)提交 TPUv7 成绩,由 vLLM 提供推理服务(Google TPU、RedHat AI 与 inferact 团队协作完成适配)。据称在外部非 Google 负载的成本口径下,TPUv7 每美元性能仍达 GB300 NVL72 FP4 的 1.42 倍,是 AMD MI355X 的 2.5 倍。vLLM 官方转发确认,并称期待更多模型通过 AgentX 落地 TPU。
「Infra」频道最新
- Artificial Analysis 首测 Vera Rubin NVL72:每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- Vera Rubin NVL72 实测：每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- 英伟达 Vera Rubin NVL72 首批实测：每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- Turing Post 盘点 2026 年 14 款开源 LLM 可观测性工具 — TheTuringPost · 2026-10-16
- 本地 AI 不是隐私功能而是路由问题：任务该跑在笔记本、内网还是云端 — bigdata · 2026-10-16
- 把 Agent 工作从 GPU 挪回 CPU，让动作更持久可预测 — cramforce · 2026-10-16