开源 AI-SQL 引擎 Quail:单张 H100 跑出每分钟 10 亿+ token 吞吐

sh_reya · x · 2026-09-25

作者与 Modal 合作的 Quail 是一个开源 AI-SQL 推理引擎,通过将查询规划与 LLM 推理联合优化,在单张 H100 上对单个查询达到 1B+ input tokens/min 的吞吐,专为 AI 驱动的数据算子这一全新推理负载设计。

所属事件:UC Berkeley 开源 AI-SQL 引擎 Quail:单 H100 吞吐破 10 亿 token/分钟(8 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →