开源 coding.sh:量化编码 Agent 浪费的时间和金钱
AsianKidTV · reddit · 2026-11-16
开发者发布免费开源工具 coding.sh(MIT 协议,本地运行,npx coding.sh),用于测量 Claude Code、Codex 等编码 agent 的成本与质量,并附上对自己运行的实测发现:
A/B 测试「简洁」插件:10 个任务各跑 6 次的配对实验显示,回复短了 17%、输出 token 减 8%,但每次运行成本反而 +11%——因为插件把风格指南塞进每次请求,开销超过省下的输出。通过率和清晰度无变化。
工作流与子 agent:57 次工作流运行(666 个子 agent,约 $2,500 API 等值)发现:
- prompt 缓存失效多花 $106(约 4% 开销),其中 41 次是 agent 在 barrier 空等直到缓存过期
- 40 个子 agent 彻底失败
会话挖掘:挖掘 3,600 个自己的会话,发现 AGENTS.md 里一个 find-and-replace 拼写错误让 Codex 在 92 个会话中找一个不存在的文件夹。
工具可 hook Claude Code、Codex、Gemini CLI、OpenCode、Copilot CLI、Aider 等,把 prompt、工具调用、diff、测试、token 和成本存进本地 SQLite;improve 命令给出修复优先级,MCP server 让 agent 查询自己的历史会话。
「编程与Agent」频道最新
- Cohere North 2 支持 agent 级护栏,坐拥 SOC 2 与 ISO 42001 认证 — cohere · 2026-11-16
- FastMCP 登顶 GitHub Trending:28.5k 星的 Pythonic MCP 开发框架 — adnan_hashmi · 2026-11-16
- YC F26 项目 FlashDrive 发布:给所有 Agent 共享的云端硬盘 — damnGruz · 2026-11-16
- Reddit 长文:AI Agent 只会解释不会干活,七宗罪引发共鸣 — Nmoreland51 · 2026-11-16
- 开发者给自己的交易日志做了 MCP 服务器,让 Claude 直接查询战绩 — Occ_inv · 2026-11-16
- 万字实战:用 AIsa 与 AI Agent 串起海外达人营销全流程 — sujingshen · 2026-11-16