开源 coding.sh:量化编码 Agent 浪费的时间和金钱

AsianKidTV · reddit · 2026-11-16

开发者发布免费开源工具 coding.sh(MIT 协议,本地运行,npx coding.sh),用于测量 Claude Code、Codex 等编码 agent 的成本与质量,并附上对自己运行的实测发现:

A/B 测试「简洁」插件:10 个任务各跑 6 次的配对实验显示,回复短了 17%、输出 token 减 8%,但每次运行成本反而 +11%——因为插件把风格指南塞进每次请求,开销超过省下的输出。通过率和清晰度无变化。

工作流与子 agent:57 次工作流运行(666 个子 agent,约 $2,500 API 等值)发现:

会话挖掘:挖掘 3,600 个自己的会话,发现 AGENTS.md 里一个 find-and-replace 拼写错误让 Codex 在 92 个会话中找一个不存在的文件夹。

工具可 hook Claude Code、Codex、Gemini CLI、OpenCode、Copilot CLI、Aider 等,把 prompt、工具调用、diff、测试、token 和成本存进本地 SQLite;improve 命令给出修复优先级,MCP server 让 agent 查询自己的历史会话。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →