NBER 论文:LLM 工作流检查 4452 项经济学研究,3460 篇发现问题
sebkrier · x · 2026-09-29
NBER 工作论文(Schwartz、Andrews、Shapiro)发布开源 LLM 工作流,可复现、改进并扩展已发表的经济学研究:
- 复现与核查:对五本经济学期刊的 4,452 个公开复现包运行,在 3,460 篇文章或附录中发现与发表结果不一致之处,并自动做敏感性分析。
- 改进计算:在 496 篇文章中,用不同实现或算法把计算耗时降低 10 倍以上,精度持平或更高。
- 扩展分析:在 923 篇文章中,自动发展出原文没有、但符合原文目标与假设的扩展分析。
作者披露分析过程使用了 LLM;其中一位作者曾为 Anthropic 承包工作,但结果不代表 Anthropic 立场。
所属事件:NBER论文:LLM工作流核查4452篇经济学研究,3460篇有问题(3 条相关)→
「研究」频道最新
- Anthropic:Claude 自主训练模型可可靠缓解十类对齐失败 — inductionheads · 2026-09-29
- AI 代码审查该记住什么?开发者探讨持久记忆与对话历史的边界 — Formal_Cry8001 · 2026-09-29
- 开发者实测记忆层:关键词检索追平召回,向量 RAG 随历史增长掉点 — Initial_Orange2985 · 2026-09-29
- 投毒测试 216 次全成功:AI agent 记忆可被恶意覆写 — MediaPositive4282 · 2026-09-29
- Palmer Luckey 出资 1000 万美元设 XPRIZE 解码动物语言 — PeterDiamandis · 2026-09-29
- 新论文 SPSD:用棋盘游戏自博弈搜索蒸馏出超人类思维链,数学均分 24.1 提至 36.6 — PMinervini · 2026-09-29