预订过期 agent 能否察觉:一个暴露状态缓存陷阱的实测方法

jylusdev · reddit · 2026-11-18

Reddit 用户 jylusdev 提出一个简洁的 agent eval 设计:让预订工具返回一条 09:00 创建、有效期至 10:30(结束时间为排他边界)的预订记录,且系统不会在过期时发出独立事件。

测试方法:

作者还建议同时检查证据引用:引用里应保留过期时间和 agent 评估时用的参照时间。如果工具缓存了解析后的状态字段,试试不刷新源数据再问一次,看缓存里的「active」是否活过了截止时间。这套测试专门针对 agent 把「解释过的状态」当事实、忽视时间边界和缓存失效的常见错误。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →