Agent框架必须内建测试和遥测
zeeg · x · 2026-07-17
作者认为，未来的 agent 框架如果不内建两件事，就不值得认真用： 1. **端到端测试能力**，而且测试体系要能兼容 LLM judge 断言； 2. **本地与生产环境遥测**，既要有 traces，也要能捕获未处理错误。 他强调，工程团队现在已经不该再容忍“测试和可观测性缺位”的新框架。开发者要么自己搭建测试 harness，要么能顺滑接入类似 **vitest-evals** 的工具；遥测上则应支持 **OTel 导出**，并提供中间件式接入或未处理错误钩子，方便 **Sentry** 之类的系统接入。作者还提到，**Eve** 在测试这块做得很好，而多数工具包在可观测性上仍有明显缺口。