Gemini Batch API 延迟降 80%,Google 还加入部分批处理支持

OfficialLoganK · x · 2026-07-21

Google 表示,Gemini Batch API 刚完成一轮基础设施升级: - p95 延迟下降 **80%** - p99 延迟下降 **68%** - 批处理成功率提升到 **99.998% 以上** - 批任务过期减少 **98%** - 新增 **partial batches** 支持 这是一条很典型的 AI 基础设施进展:重点不在模型能力,而在批处理链路的延迟、稳定性和可用性全面改善。

所属事件:Google升级Gemini Batch API,延迟大降且成功率超99.99%(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →