美团 LoHoSearch 开源：762 万实体知识图谱把搜索题做难了
美团技术团队 · wechat · 2026-07-23
LoHoSearch：用 762 万实体知识图谱自动出题，搜索智能体更难了
美团 LongCat 团队发布了 LoHoSearch，一个面向搜索智能体的新基准，不再依赖人工想题，而是基于大规模维基百科知识图谱自动生成高难问题。
- 知识图谱覆盖 762 万 个实体、2.65 亿 条有向边。
- 基准包含 544 道经人工核验的题目，覆盖 11 个领域。
- 难度从两个维度控制：搜索空间 和 结构复杂度。
- 生成流程包括建图、子图采样、题目生成、自动验证和人工复核。
评测结果
LoHoSearch 对当前最强搜索模型形成了明显挑战：
- GPT-5.5 最高也只有 34.74%。
- DeepSeek-V4-Pro、Claude-Opus-4.6、Kimi-K2.6 集中在 15.53%–15.99%。
- 其余模型都低于 14%。
额外发现
- 解题平均工具调用次数从 BrowseComp 的 35 次升到 61 次。
- 重复采样有帮助，但 pass@16 也只到 38.3%。
- 常见上下文管理策略在这里的收益只有 6.8 个百分点，明显低于 BrowseComp。
这项工作强调：当问题由知识图谱系统化构造后，搜索智能体的长程推理和上下文管理短板会被更明显地暴露出来。
「编程与Agent」频道最新
- MCP 链式调用无回滚：agent 工程的真实痛点 — agentrsdg · 2026-09-11
- DeepMind 等论文：设计文档当真相源，代码改为可抛弃产物 — Roger_M_Taylor · 2026-09-11
- 用 Agent 造小分类器：19 万文档标注成本仅 0.7 美元 — vanstriendaniel · 2026-09-11
- MathModelAgent 走红:自动完成数学建模并生成可提交论文 — jihe520 · 2026-09-11
- alphaXiv 开源 OpenResearch:用任意模型并行跑研究智能体 — alphaXiv · 2026-09-11
- 开源 AI 销售 OS DeskcommCRM 爆火:自带 Agent 与 WhatsApp 集成 — melgarafael · 2026-09-11