NVIDIA 新论文:ACES 用“技能提升”评估 Agent 技能,优于结构扫描
omarsar0 · x · 2026-08-24
NVIDIA 发布新论文,提出 ACES 方法评估 agent 技能。传统结构扫描评分与 LLM 评判质量相关性低(Spearman rho=0.14),ACES 通过对比同一任务在加载技能前后的完成差异来评估,在 58 个生产技能、947 对案例中验证,并引入 Agent Trajectory Interchange Format 实现跨 harness 比较。
所属事件:NVIDIA 提出 ACES 方法评估 Agent 技能质量(2 条相关)→
「编程与Agent」频道最新
- Google 上线 Developer Knowledge API:一个 MCP 直连 19 套官方文档 — rseroter · 2026-08-24
- Aikido 用小模型多智能体扫描,检出率超 Claude Security 且成本减半 — cyb3rops · 2026-08-24
- 把 Codex/Claude Code 当推理引擎:子进程封装的完整实践 — 0xToc · 2026-08-24
- 2026 年 AI 趋势:从工具到自主智能体的转变 — CurieuxExplorer · 2026-08-24
- 确定性验证66项全过,模型断言仅对一半:评测要分层 — MuhammadMujtaba21 · 2026-08-24
- 让Claude通过MCP在画布上直接画图:algoglyph — HappyTonight8640 · 2026-08-24