Google JAXBench 给 TPU 内核优化补上 50 项实战基准
omarsar0 · x · 2026-07-27
Google 推出 JAXBench:给 TPU 自动内核优化立基准
Google、Harvard 和 UC Berkeley 提出了 JAXBench,这是一个面向 TPU 自动内核优化的基准套件,目标是让 agent 生成的 TPU kernel 有一个可以公平对比的“爬坡靶子”。
论文的主要内容包括:
- 50 个真实 JAX 工作负载,来自 Llama-3.1、DeepSeek-V3、Mixtral、Mamba-2、AlphaFold2 等生产级架构。
- 17 个算子由 KernelBench 迁移并验证正确性。
- 另有 8 个算子直接提供 Tokamax 的手工调优 Pallas kernel 作为专家 baseline。
- 在 Gemini 3 Flash 下,补充整理过的 TPU 文档后,单样本正确率从 5.8% 提升到 37.3%。
- 模型最终在 50 个 benchmark 中解决了 48 个,达到 1.28x 的几何平均加速;再加 beam search 后提升到 1.36x。
作者的结论很直接:正确性更像是文档问题,速度更像是搜索问题。论文同时开放了 benchmark、评测 harness 和 baseline 结果,鼓励社区继续贡献。
「Infra」频道最新
- MiniBot 2.40 新增 xAI、HF Studio 和 vLLM 支持 — Creative-Type9411 · 2026-07-27
- 苹果智能眼镜、英伟达SK合作与携程51.79亿罚单汇总 — APPSO · 2026-07-27
- DeepSeek 融资传闻、欧盟 AI 透明度规则与 OpenAI 安全事故 — 创业邦 · 2026-07-27
- QuixiCore 主张原生量化内核取代先反量化再执行 — QuixiAI · 2026-07-27
- Nvidia 被曝洽谈为 OpenAI 俄亥俄数据中心提供 2500 亿美元背书 — Wonderful_Buffalo_32 · 2026-07-27
- 图表称 Anthropic ARR 已比 OpenAI 高出 328 亿美元 — wen_ragnarok · 2026-07-27