编码智能体的harness很关键
matei_zaharia · x · 2026-07-09
Databricks 表示,他们在内部代码库上测了多种编码智能体,发现 harness 设计会明显影响成本和效果。一个很简单的 Pi harness 就能做到与厂商提供的 harness 相近的成功率,但成本低一半,原因之一是送入模型的上下文更小。
他们还强调,按 token 便宜不等于按任务便宜;有些模型虽然单 token 更便宜,但因为用掉更多 token,最终任务成本更高、质量也更差。
所属事件:Databricks发布企业内部代码基准,架构比模型更影响成本(16 条相关)→
「编程与Agent」频道最新
- 用 $28 算力让模型给自己造 copilot:他的新模型个人基准 — bucolucas · 2026-10-27
- 创始人和 Claude 4 天产 46 条 App 视频,省下 1.15 万美元 — PrajwalTomar_ · 2026-10-27
- Agent 中途改计划该被允许吗:真实系统介入时的边界之辩 — wistfulcracker84 · 2026-10-27
- HeyGen 联手 Canva:幻灯片讲者备注自动变数字人讲解视频 — HeyGen · 2026-10-27
- 隐私场景实测:本地 Qwen 3.8 FN 不输云端前沿模型还更快 — dr_lm · 2026-10-27
- Cloudflare Computer 支持 agent 中断恢复,可跳过已完成的非幂等请求 — irvinebroque · 2026-10-27