Agent 时代软件重构:先像真实客户一样模拟测试你的智能体
EXM7777 · x · 2026-11-11
EXM7777 发长文《How to prepare yourself for the next decade of software》,论点:传统点击式软件(表单、dashboard)正被自主完成的 agent 取代——订机票、扣款、客服都由 agent 执行,且没有人在旁监督。这意味着旧的“点一点没问题就上线”的构建方式失效:agent 会与真人对话、做真实决策、动真金白银。
作者给出的核心习惯是:在真实客户使用之前,先以真实客户的用法测试你的 agent,否则 demo 里完美无缺的 agent 会对真实客户谎报“已完成”。配图展示了一个 travel booking agent(SkyTrip)用 Plurai 做的仿真测试:7 个模拟客户场景(改日期、拒付款、坚持先确认价格等),17 个 eval,5/7 场景通过,2 处缺陷可一键修复;并给出“模拟→修复→重跑→固化为永久测试”的可靠性闭环流程。
「编程与Agent」频道最新
- 新基准 Continual-ARC:主流 Agent 均无法从经验中学习 — hey_abusiddik · 2026-11-11
- ChatGPT 手机端新增 Devices 页,可管理其可访问的多台电脑 — Dimillian · 2026-11-11
- Sentence Transformers v6.3 发布:池化感知训练减少多向量检索的存储向量 — CShorten30 · 2026-11-11
- Claude Code 拒绝向 IDE 打字,安全分级机制引发用户吐槽 — burkov · 2026-11-11
- AWS 开源 UAEF:框架无关的 Agent 闭环评测系统,36 项指标 7 大维度 — AWS ML Blog · 2026-11-11
- 用视觉 AI 分析 43 次罚球:手腕动作与命中率无关 — spillai · 2026-11-11