LangSmith Engine v2 发布:红队测试与修复自动验证
LangChain · x · 2026-09-24
LangChain 在 Interrupt 大会发布 LangSmith Engine v2。Engine 是平台内的自动化 agent,覆盖 agent 开发生命周期各环节,上线以来已分析超 7000 万条 trace、诊断数万个问题。v2 新增:
- 主动红队测试:在生产事故出现前发现 agent 的 bug 与 prompt 问题
- 检测更隐蔽的问题:低效执行路径,以及错误率、延迟、成本的趋势异常
- 自动验证修复:在提交人工审核与部署前,自动测试并验证拟议的 prompt/代码修复
Engine 扫描生产 trace 找出改进点,将相关 trace 聚类为单一 issue,并附根因、建议修复、评测数据集的 ground truth 示例与持续监控。
「编程与Agent」频道最新
- 用 Grok 搭 4 个机器人营销团队,单条视频 750 万播放涨粉 3300 — PrajwalTomar_ · 2026-09-24
- Celesto 发布 agent 专用计算机:500ms 启动 microVM,给智能体配浏览器和终端 — aniketmaurya · 2026-09-24
- 跑长上下文 Agent 任务,llama.cpp -cram 默认值该调大了 — My_Unbiased_Opinion · 2026-09-24
- Airbnb 前员工长文复盘欺诈检测:信号特征、时序与速率维度实战经验 — jeff_weinstein · 2026-09-24
- 让 AI 只做选择不生成答案:Jev 一步步导航 Neo4j 图谱 — JeremyCMorgan · 2026-09-24
- OpenClaw 用 test-audit skill 删掉 40 万行无用测试 — steipete · 2026-09-24