开源 AI-SQL 引擎 Quail 单 H100 单查询吞吐破 10 亿 token/分钟
sh_reya · x · 2026-09-25
shreya 发布与 Modal 合作的 Quail——开源 AI-SQL 引擎。核心思路是把查询规划与 LLM 推理联合优化：单张 H100 上单查询输入吞吐可达 10 亿+ token/分钟。作者指出 AI 数据算子正在形成一种全新的推理负载形态，值得关注推理基础设施的人研究。
所属事件:UC Berkeley 开源 AI-SQL 引擎 Quail：单 H100 吞吐破 10 亿 token/分钟(10 条相关)→
「Infra」频道最新
- Google Project Suncatcher 搭 SpaceX 任务，首次太空测试 TPU 原型 — Miles_Brundage · 2026-09-25
- YC新创Isoquant上线：GLM-5.3-Flash推理$0.07/M，首token仅452ms — ycombinator · 2026-09-25
- 开发者把 NVIDIA Nemotron 3 说话人分离移植到 Apple Silicon 本地运行 — ivan_digital · 2026-09-25
- Horace He 解析怪现象:数据「可预测」时 GPU 矩阵乘法跑得更快 — goyal__pramod · 2026-09-25
- PyTorch 官方宣布 ExecuTorch 端侧黑客松，10 月旧金山开战 — PyTorch · 2026-09-25
- 网友推测 GPT 6 Luna/Sol 主打效率，意在配合 Cerebras 千 tok/s 推理 — brandon_galang · 2026-09-25