自称第三方产品 Scry 在 DeepSearchQA 上以 71.8% 胜 Gemini 的 66.1%
AaronBergman18 · x · 2026-09-06
X 账号 XyraSinclair(经 AaronBergman18 转发)宣称其深度搜索产品 Scry 在 DeepSearchQA 基准上击败 Google 的 Gemini Deep Search Agent:Scry 得分 71.8%,Google 为 66.1%。
DeepSearchQA 是 Google 团队发布在 arXiv 的 900 题基准,用于评测深度研究型 agent 在 17 个领域的多步信息检索能力,任务为因果链结构,重点考察碎片信息汇总、去重与实体消解、以及开放搜索空间下的停止判断。论文指出即使最先进的模型也难以兼顾召回率与精确率,常见失败模式包括过早停止与含糊作答。
注意:该对比成绩来自非官方第三方宣称,尚未经独立验证。
「模型」频道最新
- 去审查版 V4.1-Flash 评测:抽象代数跌 6 分,大学数学反涨 5 分 — teortaxesTex · 2026-10-23
- Claude 每小时弹「模型容量已满」,付费用户怒问该不该退订 — Alex-Stack · 2026-10-23
- Kimi K3.1 发布在即,3T 参数+3 个月 RL 被视为成败关键 — teortaxesTex · 2026-10-23
- 多个 Hugging Face 模型突然消失,含「去审查/攻击性安全」微调版本 — umarmnaq · 2026-10-23
- Claude 菜单现神秘模型代号 Fable,博主用量已爆表 — ezshine · 2026-10-23
- 开发者实测:Sol 6.1 的前端代码能力相当不错 — Dimillian · 2026-10-23