Agent 注入技能文件或导致 Pass@2 反降
rohanpaul_ai · x · 2026-08-27
研究表明，在编码会话中为每个 Prompt 附加技能文件通常是净损失。WebDev-Skills-Bench 基准测试显示，技能注入虽提升 Token 成本至少 72%，却导致 4 个模型的 Pass@2 平均下降 1.3 至 4.2 分。损失主要集中在早期简单任务，原因可能是技能锁死了模型的变通尝试，将可恢复的初错变成了不可逆的失败。
「编程与Agent」频道最新
- 马斯克转发用户实测：Grok Bot 不比 Codex 强但更顺手 — elonmusk · 2026-10-15
- 独立开发者发布 Blob0：把 S3/R2 对象存储管成 Mac 本地文件夹 — yihui_indie · 2026-10-15
- 2026 AI 工程师六层技能栈：从向量库到 Agent 编排 — mdancho84 · 2026-10-15
- 用 ChatGPT 搭机械工程工作流：Agent 编排热固封头研究，却因重置中断 — burhop · 2026-10-15
- 开源 Harness 工程课爆火：19k 星教你让编码 Agent 干活可靠 — thisguyknowsai · 2026-10-15
- 6 人团队 3 个月：AI Agent 进驻医保预授权平台的落地实录 — alex_verem · 2026-10-15