Agent 在生产环境漂移?开发者用 provider twins 和执行中不变量修复
Common_Dream9420 · reddit · 2026-11-17
作者分享了一个反复遇到的问题:AI agent 在开发环境表现正常,上线后却因 LLM 供应商响应的细微变化而漂移。他给出两个应对手段:
Provider twins(供应商孪生):为自己的 LLM 和 API 调用搭建影子版本,回放录制的真实响应,同时在其中注入边界案例,在流量进生产前完成测试。
Inflight invariants(执行中不变量)——作者认为更有效:不做事后输出检查,而是在执行中途触发自定义断言,比如「如果这个工具调用返回形状 X,下一跳必须满足 Y」。这种方式比跑后 eval 更早捕获协调失败,对两个 agent 共享状态、其中一个中途改动的场景尤其有用。
作者还在探索如何让不变量在不同工作流间可移植而不硬编码过多上下文,并向社区提问:不变量应该定义在 agent 层、任务层还是编排层?异步协调中无清晰时序的状态变更如何处理?
「编程与Agent」频道最新
- 别用前沿 LLM 做视觉:她开源 6 美元训练检测器的完整工具链 — mervenoyann · 2026-11-17
- Chrome 让网站给 AI Agent 自贴安全标签,作者质疑责任归属 — YvesMulkers · 2026-11-17
- 闲置 30 年的 HTTP 402 码复活:x402 让 AI agent 当场付费买数据 — 0xsachi · 2026-11-17
- 开源本地版个人 AI 助手 Dodaios:语音指挥编码 agent 的操作系统 — InternationalGap3698 · 2026-11-17
- 736 个 MCP 工具吃掉 109K tokens?jshookmcp 用三级工具档案解决 — Aggravating_Ring5694 · 2026-11-17
- DevScribe AI agent 花 0.05 美元把代码库变成完整工程工作台 — Limp_Celery_5220 · 2026-11-17