LangSmith 上线 Jev-as-a-judge:低成本的评估方案
airesearch12 · x · 2026-09-22
LangChain 宣布 Jev-as-a-judge 在 LangSmith 上线,可对每条生产 trace 全量评分而非抽样,在每个 trace 上检查更多评判标准而成本不涨,并能足够快地发现安全/安保问题以触发自动响应。LangChain 创始人 Harrison Chase 推荐用它对 trace 做便宜且准确的评分。这一功能的背景是 Jev——一个具备接近前沿智能的零样本分类器。
所属事件:LangSmith 上线 Jev-as-a-judge 低成本评估(2 条相关)→
「编程与Agent」频道最新
- 两人小公司用 46 个 AI Agent 运营：审批门禁、哈希锁文件与翻车复盘 — dkovl · 2026-11-12
- LlamaIndex 让 AI Agent 渗透测试自家 LlamaParse，四天暴露四条经验 — llama_index · 2026-11-12
- Manhattan 字体 v0.0.1：每个字母都是一个 Python 函数 — allanyu_ · 2026-11-12
- 用 Backplane「提示词造出」任意扩展卡,网友呼吁扩展口回归标配 — _Stocko_ · 2026-11-12
- Agent 会话跑了 51 分钟烧 24.8 万 token,网友直呼还在干活 — _Stocko_ · 2026-11-12
- 可视化 AI Agent 团队协作：每个 Agent 一间「房间」，共享知识库 — LiorAloni11 · 2026-11-12