开源 Harness Tuner:让 Claude Code 自动调优 agent,失败率降 2.5 倍
davernow · reddit · 2026-11-14
前 Apple 工程师开源了 Harness Tuner(MIT 协议),让 Claude Code 自动调优 AI agent,而不是靠人工反复改 prompt、换模型再手动验证。
在生产 agent 上实测:失败减少 2.5 倍、成本降 6 倍、速度提升 2 倍,且在调优器从未见过的对话数据上测量。
工作方式
- 调优整个 agent 而不只是 prompt:重写工具、收紧 prompt 与 skills、尝试其他模型和参数。
- 支持多目标:引入你全部的 eval,每次只改一处并对所有 eval 复查,避免按下葫芦浮起瓢。
- 目标可选质量/成本/速度,降成本或延迟时保证质量。
- 并行跑大量实验,保留赢家并合并;最终结果用留出数据验证,由代码强制执行。
- 底层是一个 Claude Code 小团队循环:一个规划实验、若干构建、一个决定取舍,可挂机运行;也支持 Codex 和 OpenCode。
安装:uv tool install harness-tuner,harness-tuner --demo 即可试玩。实验可视化和对比在其免费应用 Kiln 中查看。
「编程与Agent」频道最新
- 开发者坦言:与 AI 协作做高层级工作「很爽但很累」 — jonathan_wilke · 2026-11-14
- 开源 bastyn 静态扫描 MCP 与编码 agent 配置安全隐患 — claudio-rootedlogic · 2026-11-14
- 开发者感叹:改 CSS 五分钟就放弃,以后只需要告诉 Agent 想要什么 — robleclerc · 2026-11-14
- 开源 Devin 替代品 OpenComputer 发布:自托管、速度快 3.3 倍,可复用 Claude/ChatGPT 订阅 — zeeg · 2026-11-14
- 构建 400+ Agent 后总结:AI Agent 记忆的 15 个基础模块 — MaryamMiradi · 2026-11-14
- 斯坦福免费公开 CS329Z 智能体工程课,13 讲课件全放出 — stanfordnlp · 2026-11-14