NVIDIA 论文:评估技能而非 Agent,发现文档分与实际提升零相关

rohanpaul_ai · x · 2026-08-26

NVIDIA 新论文提出“技能提升”(Skill Lift)评估法,认为仅用高分技能文档评估 Agent 有效性具有误导性。通过对比加载与不加载特定技能的任务执行结果,研究发现结构化和评委评分与实测提升的相关性接近于零(-0.0181 和 -0.0266),表明传统的基于文档或最终答案的评分无法反映 Agent 在工作流中的实际价值。

所属事件:英伟达论文提出 Skill Lift 法评估 Agent 技能(3 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →