Opus 5.5 与 GPT-6 审计 138 篇经济学论文,标记 147 处足以改动结论的问题
HarrySurden · x · 2026-10-30
Haider 发帖称,用 Opus 5.5 和 GPT-6 Astra 两个模型独立审计 138 篇经济学论文,共标记 2,035 个潜在问题,其中 147 个严重到足以改变论文的核心结论;再由第三个 agent 尝试验证或反驳这些发现。
法律学者 Harry Surden 回复提出关键方法论质疑:应把同样的分析跑在一组多作者经济学论文语料上建立错误率基线,才能判断这些作者的错误率是经济学论文的普遍水平还是异常偏高。这一讨论对「AI 审计学术文献」的可靠性边界有直接参考价值。
所属事件:AI 审计 138 篇经济学论文查出 2035 处问题(12 条相关)→
「漫话AGI」频道最新
- 「我们把沙炼成住在云端的新神」:一句关于 AI 时代的自嘲 — iruletheworldmo · 2026-10-31
- 六个月写成《Phase Lock》宣言:用脑机接口对齐 AI、保住人类能动性 — matiroy · 2026-10-31
- 读 Anthropic S-1:不是品类赢家通吃,而是整个软件生态赢家通吃 — mobileraj · 2026-10-31
- CS312 课程长文:预训练中「尖锐度」与稳定性边缘之谜 — tatsu_hashimoto · 2026-10-31
- NBER 论文:工人「训练自己的替代者」反而可能涨薪 — joshgans · 2026-10-31
- Trata 发布 Hedge-Bench:顶级模型金融预测准确率不过半 — ycombinator · 2026-10-31