客服 agent 出错后,团队几周后也还原不出 prompt
larabyeol · reddit · 2026-07-24
一个团队在处理客服投诉时,发现自己几周后已经无法还原当时 agent 为什么会给出那个错误答案。
- 他们有客户截图、时间戳和输出日志。
- 但没有能精确对应那次输出的 prompt 版本。
- 系统提示词被写在配置文件里,还夹在其他无关提交中被多人修改。
- 同一时间他们又升级了模型版本,导致更难判断到底是“旧模型+新 prompt”还是“新模型+旧 prompt”。
作者最后把问题落到生产治理上:prompt 要版本化、要和模型版本绑定、配置变更要可追溯,否则出了事故根本没法做事后取证。
「编程与Agent」频道最新
- huggingface_hub 2.3.0 发布:百万文件列取从分钟级降到 20 秒 — lhoestq · 2026-10-27
- Nous Research 发布 Advanced Delegation 插件,子智能体可按任务选模型 — NousResearch · 2026-10-27
- 不上 X 的牙医邻居玩转 Codex,编程门槛正在消失 — gabrielchua · 2026-10-27
- 斯坦福 PaperFormalizer:把论文自动转成 Lean 验证版本 — StanfordUniversity · 2026-10-27
- TRL 异步 GRPO 训练器默认启用 score centering + masked importance sampling — _lewtun · 2026-10-27
- a16z长文:从PC到表格到邮件,「先混乱后驯服」是颠覆技术定律 — a16z Newsletter · 2026-10-27