MLPerf v6.1 首次纳入 agentic 推理与万亿参数模型基准
TheZachMueller · x · 2026-09-16
Lambda 发布 MLPerf Inference v6.1 结果,创下两个「首次」:首个在数据中心硬件上跑的 agentic 推理基准负载,以及首个部署超万亿参数模型的 MLPerf 测试。- 4×Blackwell Ultra 上 GPT-OSS 120B 取得全部 Blackwell Ultra 提交中的领先 Offline 吞吐(65,511 tokens/s),比 v6.0 同硬件提升 8.85%/8.79%,纯软件栈优化半年所得;- HGX B200 开放组别用 Kimi K2.6 替换参考负载的 27B 模型,跑 1T+ 参数 agentic 基准,同样 harness、无显存上限。
「Infra」频道最新
- 一行命令直取 4 卡 B200:uvx modal shell 实用玩法 — charles_irl · 2026-09-17
- Anthropic 工程师感叹:我只想要五 petaflops 的算力 — charles_irl · 2026-09-17
- El Pulpo 0.1.0 发布:12.7MB 的本地 LLM 代理与负载均衡器 — zaytzev · 2026-09-16
- CPO 峰会共识:光互连规模化的答案不会是单一方案 — BenBajarin · 2026-09-16
- arXiv 新论文提出 Intelligence per Watt:量化本地 AI 的智能能效 — yogthos · 2026-09-16
- 开发者拆解 X 搜索排序架构:双塔检索 + L1/L2 多级排序 — _jaydeepkarale · 2026-09-16