Amazon 论文:环境一变,存下的 agent 技能反噬,最多掉 10 个点
rohanpaul_ai · x · 2026-11-20
Amazon 新论文《When Agent Skills Go Stale》研究 agent 技能(skills)在环境变化后的表现。Agent skills 存储过往经验(文件路径、字段名、命令等)以摊销推理成本,但应用或 API 变更后这些细节会悄然过期。
在 4 种任务设置、2 个模型(Claude Opus 4.7 与 Haiku 4.5)上的发现:
- 曾经有益的技能在环境变化后可使任务表现下降超 10 个百分点,或使执行成本增加近 40%(相对无技能基线);也可能成功率不变但执行节省消失。
- 影响程度取决于哪些环境细节过期,以及 agent 用当前观察补偿的能力。
作者提出选择性维护(selective maintenance):重放成功执行中的检查步骤(无需额外模型调用),验证观察到的差异是否与技能状态冲突、修复受影响内容并验证更新,局部修复不足时整体重建。相比继续用过期状态,维护可将任务准确率最高提升 67 个百分点,执行步数减少 37%,且不需要任何变更说明。
所属事件:亚马逊论文揭示 Agent 技能过期风险,可致成绩反降逾 11 分(2 条相关)→
「编程与Agent」频道最新
- 200 行 Python 调 Gemini 生成带字幕配音的 9:16 演示视频 — DynamicWebPaige · 2026-11-20
- Strategist:自动进化推理策略库,30 项基准赢 24 项且便宜 39% — liuzhuang1234 · 2026-11-20
- Spring Boot 4.2 弃用 RestTemplate,一文看懂如何迁移到 RestClient — therealdanvega · 2026-11-20
- B2B 团队用生产 trace 构建模拟用户 agent 自动化 QA — Lopsided_Feedback_81 · 2026-11-20
- 开发者给 Claude Code 配一台专属电脑:像人一样操作浏览器和桌面应用 — jradoff · 2026-11-20
- GBrain 展示 AI 夜间自动干活:三周产出 850 页销售记录 — garrytan · 2026-11-20