开发者给 Langfuse 发布门禁加测试:缺一条评分就拒绝发放通过凭证
MongooseWonderful198 · reddit · 2026-11-17
作者维护 MIT 开源的 Langfuse Prompt Release Tools(Python/JS),在 0.8 alpha 中加入了一个发布检查测试:当本地所有评估都通过、但某条必需的 run 级评分未写入 Langfuse 时,发布导入器应拒绝发放「通过凭证」。演示在一次性服务器上跑三个合成用例——完整导出时验证器确认并发放通过凭证;扣留一条评分后,即使 flush() 和有界轮询后该结果仍为 pending,验证器拒绝通过。验证器会核对捕获的实验与数据集、必需用例以及必需页面的评分类型与取值。这是测试工具包自身的拒绝路径,不是 Langfuse 的 bug。如果你的发布策略要求有落库的评估证据,这提供了一个可在信任本地「通过」结果前先行验证的小型失败用例。
「编程与Agent」频道最新
- 大 V 宣称工作流已进入云 Agent + 无限量 Claude tokens 阶段 — jiayuan_jy · 2026-11-17
- Jane Street 工程师发问:Agent 做不好软件设计,那设计还重要吗 — charliermarsh · 2026-11-17
- Linear 代码评审改造:10 月 53% 的 PR 仅由 agent 加作者审完 — jiayuan_jy · 2026-11-17
- Reddit 网友分享五阶段 agent 工作流,Brief 复述 prompt 大幅减少返工 — Iiifebri · 2026-11-17
- PlugIt 开源:把 OpenAPI 规范裁剪成安全 MCP 服务器,默认只读 — Low_Strawberry2484 · 2026-11-17
- 用户实测:20 美元档 Fable 5.2 将停用,Amp 体验胜过 Claude Code — bytebot · 2026-11-17