DeepMind 论文:AI 智能体 92% 识破坏建议,但仍照做不误
alex_verem · x · 2026-10-28
Google DeepMind 发表论文 XYEval: Agents say yes to bad advice,研究智能体如何应对「XY 问题」——用户不问真正的问题,而是询问自己猜测的解决方案。
- 研究者把六个标准基准(编码、工具使用、客服、难推理等)改造成 XY 问题评测,测试五个模型。
- 结果显示智能体在 XY 变体下性能大幅下滑,相对降幅最高达 46.7%;用户越是「迂腐」、要求详细解释才批准正确方案时,下滑越严重。
- 简单的系统提示(提醒模型注意 XY 问题)只能部分缓解;轨迹分析揭示了下滑的行为原因。结论:当前智能体缺乏识别用户误导并清晰沟通真实问题的能力。
所属事件:DeepMind 论文:AI Agent 识破坏建议却仍照做(3 条相关)→
「模型」频道最新
- 博主怒批 OpenAI:天天发 reset 公告像小丑,模型又慢又降智 — lxfater · 2026-10-28
- Datalab OCR 非拉丁文文档大幅领先 Azure 与 AWS Textract — VikParuchuri · 2026-10-28
- Datalab 推出 lite OCR:每千页 0.5 美元,比 Azure 便宜 10-30 倍 — VikParuchuri · 2026-10-28
- 截图显示 Gemini 4 Argon 已向 Pro 订阅用户开放,配独立周额度 — arg-developer · 2026-10-28
- Gemini Notebook 将接入 Connectors,首发仅支持 Google Drive — testingcatalog · 2026-10-28
- IBM 论文:结构感知检索器 STAIR 幻觉率降至 0.05%,比精调 RAG 低 65 倍 — Promptmethus · 2026-10-28