56 个新依赖 bug 实测:让 Claude Code 优先调 MCP,准确率 68%→91%

Available_Side_7134 · reddit · 2026-10-23

Cairn Commons 团队发布了面向编码 agent 的只读 MCP 服务,用于查询「已被容器复现验证」的新依赖 bug 与 workaround,并用 56 个刚发布的依赖 bug(27 个包)做了 benchmark。

要解决的问题:依赖刚发版、训练数据和搜索引擎都还没索引时,agent 会各自烧 token 翻 nodemodules、搜网页、抓 GitHub;Claude Code 对本地原因判断正确率 95%,但对「这 bug 是否已被上游知晓/修复」仅 68%,常误报「没有已知 issue」。

方案与特性:

关键教训(MCP 路由):只挂上 MCP 没用——agent 会无视它。直到在 MCP server instructions 和 CLAUDE.md 里写明「首次依赖内报错时,先调 cairnsearch 再读源码/搜网页」,56/56 全部命中。

Benchmark 结果(Claude Code headless,56 例):已知/已修复判断 68%→91%(p=0.004);全对 66%→89%;平均耗时 40s→25s(-38%);web 搜索 86→25(-71%)、GitHub 抓取 93→13(-86%)。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →