Databricks 实测:Genie 企业数据任务通过率 91%,远超两个前沿 agent
matei_zaharia · x · 2026-11-17
Databricks 与 Turing 合作开发了一个企业数据 agent 基准:agent 不只做表查询,还要用散落在 notebooks、dashboard 和已保存 SQL 中的业务知识,在真实 Databricks 工作区里完成任务,每个任务每个 agent 跑 5 次。
结果:Genie(由 Genie Ontology 驱动)通过率 91%,两个前沿 agent 分别只有 45% 和 58%;同时 Genie 用的 token 不到一半,速度快 3–4 倍。
关键差异被归结为「业务上下文」:SQL 语法正确仍可能算错,如果用错了业务定义或计算规则。Genie Ontology 负责检索并排序业务知识,让 agent 找到并套用正确的上下文,而不是只依赖表结构。基准与方法论已公开。
「编程与Agent」频道最新
- 波兰工程师自述:团队已无人手写代码,人工审查也近乎消失 — PawelHuryn · 2026-11-17
- 多用户共享 Agent 体验糟糕,发布四项更新推出一键房间 — thechrisperry · 2026-11-17
- 开源 Pascal 编辑器在浏览器里实现近原生速度的 3D 建筑设计 — anthara_ai · 2026-11-17
- OpenClaw CI 成本砍 95.5%:runner 时长降 86.5%,agent 编码瓶颈在测试 — vincent_koc · 2026-11-17
- tsrs 23 天拿下 npm 周下载 500 万,同类工具普遍需两三年 — cnakazawa · 2026-11-17
- 每日提示词:让 AI 研究你的 skills 再造一个调度器 — yungcontent · 2026-11-17