Agent Arena 数据:各实验室 agent 体验差距远大于能力差距
arena · x · 2026-10-17
Agent Arena 基于 6 月底至 10 月初的 4 项信号,追踪 Anthropic、OpenAI、Google DeepMind、Moonshot、xAI 和 DeepSeek 各自最强 agent 的表现,发现行业的分化点不在「能否完成任务」,而在「用户是否愿意与它共事」:
- Praise vs Complaint(赞/怨比):OpenAI 与 Anthropic 高出榜单均值 +35 分,Moonshot、xAI、DeepSeek 仅在 +5 至 +13 之间——这是拉开实验室差距最大的信号。
- Confirmed Success(确认成功):三个月内各实验室最佳模型从 -4 升至 +14,Anthropic 的 Claude Opus 5.5 (Max) 以 +20 领跑。
- 错误恢复与可控性趋同:自 6 月以来,六家实验室间 Bash Recovery 分差从 34 缩至 16 分,Steerability 从 19 缩至 11 分,几乎减半。
结论:各实验室在「避免失败」上正在趋同,而「让用户满意」才是头部三家拉开身位的地方。
「编程与Agent」频道最新
- StackOne 推出 MCP 工具调用策略引擎,可按金额/PII 细粒度管控 agent 权限 — afp-media · 2026-10-17
- shadcn 感叹:Claude Skills 发布至今仅一年 — shadcn · 2026-10-17
- ClinOpsBench 发布:15 个 AI agent 在模拟临床试验中监督 4 个月 — ycombinator · 2026-10-17
- PR Lens 用 Jev 图像把 PR 截图匹配到架构图,2 秒看懂改动影响 — nevrekaraishwa2 · 2026-10-17
- Cohere 新研究:智能体团队协作可达前沿水平,成本仅 30% — nouhadziri · 2026-10-17
- 四大 Agent 框架同周修复同一问题:上下文压缩与人工审批 — HelpfulCollar1070 · 2026-10-17