OTEL 追踪上的免费 LLM 判官与 agent 失败自动发现，开放至 1 月 1 日

_ScottCondron · x · 2026-10-15

作者宣布在 CoreWeave 上免费提供基于 OTEL GenAI 追踪的 LLM 判官（LLM judges）与自动失败发现功能，期限至 1 月 1 日。配图展示产品界面：按「失败轮次」绘制的分类曲线（丢失上下文、不当拒绝、漏需求、系统错误、工具失败/误用等），并列出 Top 失败聚类——如恢复型工具调用失败（276 条追踪、占 1.1%）、无效命令参数恢复、忽略结构化网页状态检查请求等，每类可下钻查看具体对话，适合排查 agent 生产环境的系统性问题。