开源 AI-SQL 引擎 Quail 单 H100 跑出每分钟 10 亿 token

sh_reya · x · 2026-09-25

研究者 shreya 与 Modal 合作发布开源 AI-SQL 引擎 Quail。核心思路是把查询规划与 LLM 推理联合设计(co-design):AI 算子作为新的推理负载,由系统统一调度查询计划和推理过程,从而在单张 H100 上对单个查询实现超过 10 亿输入 token/分钟的吞吐。作者称 AI 驱动的数据算子构成了一类新颖的推理工作负载,Quail 展示了针对明确使用场景做推理栈协同设计的收益。项目已开源。

所属事件:UC Berkeley 开源 AI-SQL 引擎 Quail:单 H100 吞吐破每分钟 10 亿 token(10 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →