LangChain 开源 WikiBench:量化代码库 Wiki 对编码 agent 的增益
LangChain · x · 2026-08-26
LangChain 团队为评估其开源代码库文档 agent OpenWiki 构建了 WikiBench 基准,回答两个问题:
- 某个 wiki 本身质量如何——用基于底层代码库生成的有据可依的问题来评估不同 wiki 的质量差异;
- wiki 到底有没有帮助——同一批问题以三种方式运行:仅用 wiki、仅用源码、两者都用,比较哪种胜出。
WikiBench 基于 Harbor 框架构建,用于评估长时运行任务上的智能体,Harbor 任务包含三个组成部分。目的是在持续改进 OpenWiki 的过程中能量化「改动是否真的让 wiki 更好、对编码 agent 更有用」。
所属事件:LangChain 开源 WikiBench 评估代码库文档 Agent 效果(4 条相关)→
「编程与Agent」频道最新
- 独立开发者发布 Blob0:把 S3/R2 对象存储管成 Mac 本地文件夹 — yihui_indie · 2026-10-15
- 2026 AI 工程师六层技能栈:从向量库到 Agent 编排 — mdancho84 · 2026-10-15
- 用 ChatGPT 搭机械工程工作流:Agent 编排热固封头研究,却因重置中断 — burhop · 2026-10-15
- 开源 Harness 工程课爆火:19k 星教你让编码 Agent 干活可靠 — thisguyknowsai · 2026-10-15
- 6 人团队 3 个月:AI Agent 进驻医保预授权平台的落地实录 — alex_verem · 2026-10-15
- 92.7 万字符的 epstein.md:专门消灭 AI 味设计的 .md 文件走红 — karmay007 · 2026-10-15