METR 实验:AI 让资深开发者慢 19%,本人却自认快了 20%

srimisra · x · 2026-10-30

作者引用 METR 2025 年初的随机对照实验:16 名资深开源开发者、246 个任务,使用 Cursor Pro + Claude 3.5/3.7 Sonnet。结果与感觉严重背离——

屏幕录制分析显示时间去向:主动编码和信息检索变少,提示 AI、等待 AI、审查 AI 输出和空转时间变多;AI 生成代码的采纳率不足 44%,被拒绝的输出仍在消耗阅读时间。可怕之处不在变慢,而是聪明人完全感觉不到。

作者给出团队避坑建议:先写清「完成定义」再写 prompt,模糊需求导致返工循环;设止损规则(两次失败就接管);不要干等生成,排队下一个任务;仓库越成熟、标准越高,AI 缺上下文越明显——这正是它拖慢人的地方;用同一类任务有/无 AI 计时对比自己,一周真实数据胜过一年印象。

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →