NVIDIA 新论文:ACES 用“技能提升”评估 Agent 技能,优于结构扫描
omarsar0 · x · 2026-08-24
NVIDIA 发布新论文,提出 ACES 方法评估 agent 技能。传统结构扫描评分与 LLM 评判质量相关性低(Spearman rho=0.14),ACES 通过对比同一任务在加载技能前后的完成差异来评估,在 58 个生产技能、947 对案例中验证,并引入 Agent Trajectory Interchange Format 实现跨 harness 比较。
所属事件:英伟达论文提出 Skill Lift 法评估 Agent 技能(3 条相关)→
「编程与Agent」频道最新
- 开发者 vibe coding 出开源 Newsletter 平台,价格仅 Beehiiv 的 17% — marclou · 2026-10-15
- ERP AI 推出 Proto:让 AI agent 替你操作商业软件的'无头 SaaS' — Aiden_Tech_Ai · 2026-10-15
- 工程师主管必读清单:别让 Agent 摘要取代深度阅读 — rseroter · 2026-10-15
- ElevenLabs MCP + Claude Motion:一句提示词给视频加动效,跳过 AE — CurieuxExplorer · 2026-10-15
- 打包 1.5 万美元系统:用 Claude 挖「谷歌有排名但 ChatGPT 不推荐」的 SEO 客户 — aryanXmahajan · 2026-10-15
- Google 论文 Harness²:无验证器下递归进化 agent harness,最高提升 11.5 分 — dair_ai · 2026-10-15