Quail 基准成绩：29 条查询平均快 1.84 倍，医疗报告查询快 14 倍
sh_reya · x · 2026-09-25
在 29 条基准查询上，Quail 比手工调优的 vLLM 基线平均快 1.84 倍；最大的一条医疗报告查询快 14 倍（29 分钟 vs 6.84 小时），且 KV regret 显著更低。
所属事件:UC Berkeley 开源 AI-SQL 引擎 Quail：单 H100 吞吐破 10 亿 token/分钟(10 条相关)→
「Infra」频道最新
- Google Project Suncatcher 搭 SpaceX 任务，首次太空测试 TPU 原型 — Miles_Brundage · 2026-09-25
- YC新创Isoquant上线：GLM-5.3-Flash推理$0.07/M，首token仅452ms — ycombinator · 2026-09-25
- 开发者把 NVIDIA Nemotron 3 说话人分离移植到 Apple Silicon 本地运行 — ivan_digital · 2026-09-25
- Horace He 解析怪现象:数据「可预测」时 GPU 矩阵乘法跑得更快 — goyal__pramod · 2026-09-25
- PyTorch 官方宣布 ExecuTorch 端侧黑客松，10 月旧金山开战 — PyTorch · 2026-09-25
- 网友推测 GPT 6 Luna/Sol 主打效率，意在配合 Cerebras 千 tok/s 推理 — brandon_galang · 2026-09-25