AI 审计萨兹-祖克曼研究:138 篇论文查出 2035 处问题
Tyler_Menzer · x · 2026-10-29
Tyler Cowen 在 Marginal Revolution 转发了一项针对经济学家 Emmanuel Saez 与 Gabriel Zucman 研究的 AI 审计,结果引发震动:
- 138 篇论文被审计,发现 2035 处问题,其中 147 处严重到足以改变论文的核心结论数字;69% 的论文至少有一处问题;97% 有明确方向性的重大/中等错误都在夸大论文的主张(如高估不平等程度、高估财富税效果等)。
- 方法论:每篇论文由 Claude Opus 5.5 与 GPT-6 Astra 独立审计(互不可见),基于论文附录与复现数据重新计算核心数字、核对原始数据源(税务统计、国民账户、美联储与调查数据);再由第三个 agent 仲裁,尝试反驳每个问题、补充遗漏并分级。
- Cowen 表示"经济学科需要对这些工作及相关政策主张进行根本性重估",并认为这只是 AI 修正既有经济学研究的第一步。
原帖作者同时提出保留意见:匿名网站、不公开 prompt 与数据,这种传播方式是否是经济学研究应有的演进路径值得警惕。
所属事件:AI 审计 138 篇经济学论文查出 2035 处错误(4 条相关)→
「研究」频道最新
- 作者借 Claude 长对话打磨 3SAT 新算法思路,遭对话长度上限截断 — brandondamos · 2026-10-29
- 模型的记忆会固化,但授权会过期:一个验证权限撤销的实验设计 — tallmetommy · 2026-10-29
- 「在测试集上训练」之争:ML 工程师称垂直 AI 的超能力恰在于此 — HanchungLee · 2026-10-29
- 浙大团队提出 DTCA:为扩散语言模型 RL 训练做 token 级信用分配 — OmniAI-ZJU · 2026-10-29
- DeepMind 开放 Antigravity 科学计划,用编码智能体加速科研全流程 — DeryaTR_ · 2026-10-29
- 新论文提出 Alignment Training 框架:训练 AI 与教育孩子的委托人最优策略 — Afinetheorem · 2026-10-29