AWS 推出基于 OpenTelemetry 的框架无关 Agent 评测

Crescitaly · reddit · 2026-08-30

AWS 发布 AgentCore Evaluations，支持通过 OpenTelemetry 或 OpenInference traces 重建会话，从而对 LangGraph、LlamaIndex、OpenAI Agents SDK 等多种框架构建的 Agent 进行评分。该服务可运行 CI 回归评测并采样生产流量。虽然解决了集成障碍，但统一遥测数据不代表统一语义，不同框架发出的轨迹完整度不一，LLM 评测结果仍高度依赖法官选择和 Rubric 设计。