Visa 发布购物智能体基准:22 个模型失败率约 43%
Visa 于 11 月 5 日发布 Agentic Commerce Benchmark,用 15 个购物场景测试 12 家实验室的 22 个 AI 模型,总通过率为 57.2%,失败率约 43%。基准重点考察当没有商品符合用户需求时智能体能否拒绝下单,结果显示超过一半的失败案例中,agent 找不到正确商品却照样完成购买,凸显购物智能体在可靠性与安全把控上的隐患。
2026-11-10 ~ 2026-11-11 · 2 条相关
- Visa 购物智能体基准:22 模型总通过率 57.2%,54% 失败仍下单 — krishnan · 2026-11-10
- Visa 实测 22 个 AI 模型 15 项购物任务,失败率约 43% — Thick_Mulberry_2235 · 2026-11-11