开发者给 Langfuse 发布门禁加测试:缺一条评分就拒绝发放通过凭证

MongooseWonderful198 · reddit · 2026-11-17

作者维护 MIT 开源的 Langfuse Prompt Release Tools(Python/JS),在 0.8 alpha 中加入了一个发布检查测试:当本地所有评估都通过、但某条必需的 run 级评分未写入 Langfuse 时,发布导入器应拒绝发放「通过凭证」。演示在一次性服务器上跑三个合成用例——完整导出时验证器确认并发放通过凭证;扣留一条评分后,即使 flush() 和有界轮询后该结果仍为 pending,验证器拒绝通过。验证器会核对捕获的实验与数据集、必需用例以及必需页面的评分类型与取值。这是测试工具包自身的拒绝路径,不是 Langfuse 的 bug。如果你的发布策略要求有落库的评估证据,这提供了一个可在信任本地「通过」结果前先行验证的小型失败用例。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →