两个 Haiku agent 加 grep 实现 77% 代码召回,单问题成本约 1 美分

Opening-Round5528 · reddit · 2026-11-18

CodeNib 在 ContextBench(500 任务、8 种语言,衡量系统找回人工标注相关代码的比例)上,仅用两个 Claude Haiku 5.5 agent 加 grep 检索代码上下文——不用 embedding、不用 reranker——找回 77% 的相关行,而排行榜第二名只有 61%,单问题成本约 1 美分。

双 agent 分工:

代价是广撒网:行精确率仅 20.5%。在检索之上加一个 Opus 修复 agent 后,整个系统在 500 个任务中解决 388 个,截至 10 月 23 日为 agent 系统排行榜第一。需注意任务标注在开发期间可见。技术报告、轨迹和成本票据均已公开。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →