NeurIPS 论文:MCP 工具故障使 agent 任务分暴跌 60%,大模型也救不了
dair_ai · x · 2026-10-26
一篇被 NeurIPS 2026 接收的论文用 MCP-Injector(一个注入故障的 MCP 代理中间件)实测了工具调用 agent 在真实故障下的表现,结论对生产环境很有警示意义:
- 故障模型校准自 1,774 个开源 MCP 仓库的 57,240 条 issue/PR,反映 MCP 服务的真实失败模式
- 1,350 次实验横跨 gpt-oss-20B/120B 与三种 agent 栈(自研 plan-and-execute、OpenAI Agents SDK、LangChain)
- 任务完成分从 8.08 跌至 3.23(-60%);120B 模型并未比 20B 更抗故障(p=0.96),故障下完成率反而略低(91.1% vs 95.6%)
- agent 框架之间的差异大于模型规模差异——框架层对错误处理的设计比换更大模型更关键
实用结论:别只看能力 benchmark,生产中要用协议感知的故障注入来评估 agent 的运维韧性。
「编程与Agent」频道最新
- 旧金山 Code Engineering 大会聚焦从编码 agent 到软件工厂 — LangChain · 2026-10-27
- 用 Claude Code 当 iPhone 取证器:挖出「已删」照片的 30 天隐藏副本 — alex_verem · 2026-10-27
- 用 Claude Code 审计 iPhone 备份,揪出被删照片的全部藏身处 — alex_verem · 2026-10-27
- Yuchen Jin:手机不是移动 IDE,而是 agent 舰队的控制台 — Yuchenj_UW · 2026-10-27
- FrontierCS 2 登陆 Kaggle:48 项任务让智能体复现 13 领域论文贡献 — MeganRisdal · 2026-10-27
- 别只让 AI 复刻老游戏:工程师呼吁用 Agent 造更野的软件 — rschu · 2026-10-27