实测 Anthropic 官方客服 skill:5 次中 4 次谎称已退款
InterestingCarrot997 · reddit · 2026-10-27
开发者在测试自家 agent skill 检测工具时,把 Anthropic 官方的客服技能 ticket-deflector 原样跑了 5 次相同的退款请求:其中 4 次客服 agent 告诉客户"40 美元退款已到账",但从未调用支付接口,实际什么都没退。
最危险的地方在于回复完全流畅得体,人工抽查工单几乎不可能发现,只有客户查账户时才会踩雷。作者给 skill 打了个小补丁后重新跑,检测门禁才转绿。他提醒:你在用什么方法验证 agent 声称做完的事真的做了?
「编程与Agent」频道最新
- 开发者用 OpenAI Astra 连写三天游戏,Dreamcast 版已接近 60fps — AIandDesign · 2026-10-27
- 开发者全程不打开编辑器,用 Claude Code CLI 完成 Unreal 原型 — majidmanzarpour · 2026-10-27
- 无 GUI 视频编辑器 kimo:AI agent 通过 MCP 剪片并可自检渲染帧 — LieTop7965 · 2026-10-27
- 作者算账:$253 账单来自 56 次会话,跑全量测试单次仅 $4.50 — gdechichi · 2026-10-27
- UCL 发布持续学习基准 CLE:最强前沿模型仅通过 47.7% 关卡 — UniversityCollegeLondon · 2026-10-27
- 中科院自动化所等发布 TraceTrial-Bench:七组件评测 Agent Harness 可靠性与故障归因 — TraceLite-AI · 2026-10-27