CRMArena-Pro 基准显示顶级 Agent 多轮 CRM 任务成功率大跌

Salesforce 推出 CRMArena-Pro 基准,在真实 Salesforce 环境内构建 B2B 与 B2C 场景,包含 19 个经专家验证的 CRM 任务。结果显示领先 Agent 单轮任务成功率约 58%,但当用户在多轮对话中逐步透露信息时降至约 35%,保密意识接近零。作者提醒该基准是只读评测,不覆盖企业工作全部环节,基准分数只是单次任务片段的证据,不能等同于胜任一份工作。

2026-09-03 ~ 2026-09-03 · 4 条相关