编码智能体的harness很关键
matei_zaharia · x · 2026-07-09
Databricks 表示，他们在内部代码库上测了多种编码智能体，发现 harness 设计会明显影响成本和效果。一个很简单的 Pi harness 就能做到与厂商提供的 harness 相近的成功率，但成本低一半，原因之一是送入模型的上下文更小。
他们还强调，按 token 便宜不等于按任务便宜；有些模型虽然单 token 更便宜，但因为用掉更多 token，最终任务成本更高、质量也更差。
所属事件:Databricks发布企业内部代码基准，架构比模型更影响成本(16 条相关)→
「编程与Agent」频道最新
- 浏览器主线程很贵:动画卡顿的真正成本与前端优化实践 — jh3yy · 2026-09-11
- 受 OpenAI 万机群启发，开发者开源 agent 众包解题平台 — Benjaminsen · 2026-09-11
- 开源 Mac 应用 Lucid：只在跑 AI 时阻止笔记本休眠 — Pitiful_Hedgehog_600 · 2026-09-11
- 20kb 函数匹配达成,banteg 召集 AI 逆向 Snail Mail 剩余 20 个挑战 — banteg · 2026-09-11
- Alex Townsend 汇编 200 个数值线性代数开放问题，供人类与 AI 攻关 — IgorCarron · 2026-09-11
- Kimi K2.8 Preview 上线：性能接近 K3、1M 上下文全档开放 — teortaxesTex · 2026-09-11