Agent 注入技能文件或导致 Pass@2 反降
rohanpaul_ai · x · 2026-08-27
研究表明,在编码会话中为每个 Prompt 附加技能文件通常是净损失。WebDev-Skills-Bench 基准测试显示,技能注入虽提升 Token 成本至少 72%,却导致 4 个模型的 Pass@2 平均下降 1.3 至 4.2 分。损失主要集中在早期简单任务,原因可能是技能锁死了模型的变通尝试,将可恢复的初错变成了不可逆的失败。
「编程与Agent」频道最新
- 18 个本地应用统一接入 MCP:工具搜索解决过载问题 — jarjav69 · 2026-08-27
- 横评 CircleChat 等多智能体框架: governance 能力大比拼 — Agreeable_Craft_8943 · 2026-08-27
- AI 让我重新在意 Git 提交粒度:细粒度提交便于回溯逻辑 — Gleb_SV · 2026-08-27
- 如何防止 Agent 执行时捏造参数?一种验证方案 — Jay299792458 · 2026-08-27
- 给AI Agent用的占卜MCP服务器:塔罗、易经、符文等五种系统 — Puzzled_Most_5365 · 2026-08-27
- 414天写168万行代码,AI solo 编程实战复盘 — jamestagg · 2026-08-27