开源AI-SQL引擎Quail单块H100跑到10亿+输入token/分钟
sh_reya · x · 2026-09-25
Shreya Shankar 团队与 Modal 合作开源了 AI-SQL 引擎 Quail。核心思路是将查询计划与 LLM 推理联合优化：AI 驱动的数据算子构成一种新型推理负载，通过统一调度查询与推理，在单块 H100 上对单条查询达到 10 亿+ 输入 token/分钟 的吞吐。
被引用的讨论（Shadaj L）指出，这类系统说明推理引擎的接口需要超越朴素的输入/输出抽象，暴露对调度策略（schedules）与缓存（caching）的精细控制将成为关键能力。
所属事件:UC Berkeley 团队联手 Modal 开源 AI-SQL 引擎 Quail(25 条相关)→
「Infra」频道最新
- 2026 中期选举 41 项数据中心公投 40 项倒向反 AI 建设方 — Acceptable-Offer-518 · 2026-11-12
- KubeCon 前夕 Azure Day：AKS 单集群 65 节点跑 2.2 万个 Agent — davemccollough · 2026-11-12
- CoRL 会场同址开天然气论坛,主题直指 AI 数据中心供电 — carlosdponx · 2026-11-12
- a16z 播客：Mike Volpi 从 Cisco 70+ 并购经验谈 AI 基建周期 — a16z · 2026-11-12
- AMD 服务器份额年增 6 点,预计 2027 年中营收超 Intel — BenBajarin · 2026-11-12
- 新研究：超大规模数据中心屋顶反光，白天反而降温 1.8-2.2°C — SumitGup · 2026-11-12