133 名专利律师随机试验:AI 提升初级产出,却无助于底层判断力
rohanpaul_ai · x · 2026-09-22
一项覆盖 11 家美国 IP 律所、133 名专利律师、为期三个月的随机对照试验得出令人不安的结论:
- AI 辅助的律师在 10 天和 90 天两个节点的专利文书质量都更好,初级律师获益最大:分别提升 0.58 和 0.60 个标准差;90 天时初级提升 0.60 SD,资深律师仅提升 0.30 SD。
- 但撤掉 AI 后进行一项依赖判断力的 redlining 任务时,模式反转:用过 AI 的资深律师比对照组高 0.45 SD,而初级律师平均收益几乎为零(-0.03 SD)。
核心发现:AI 能让初级专业人士的产出看起来更好,却没有真正提升他们的底层判断能力,技能差距在脱离工具时重新暴露。
所属事件:NBER实验：AI提升初级律师产出却无持久技能收益(5 条相关)→
「研究」频道最新
- CoRL 联合主席忆 2021 展区仅三张桌，对比 2026 规模感概行业巨变 — Ed__Johns · 2026-11-12
- 预训练原子模型筛选 1620 种组合，为单原子金属找稳定衬底 — bravo_abad · 2026-11-12
- Claude Fable 5.2 机器人实验被拿去吊打李飞飞 World Labs?作者称搞错了研究问题 — dotey · 2026-11-12
- Claude 数周产出 239 个形式化证明,验证 123 个开源库无崩溃 — kieranklaassen · 2026-11-12
- SynthICL：纯合成数据训练，单演示泛化 16 项真实操作任务 — Ed__Johns · 2026-11-12
- AI Agent 不跑模型直接改权重,1024 个数字让 MATH-500 从 7.4% 升至 37.4% — VictorSanh · 2026-11-12