「AI 审稿已超人类」研究遭质疑：评测主要是 GPT 在评 Claude
JessicaHullman · x · 2026-10-25
被广泛转发的「AI 同行评审全面超过人类」研究正在被学者降温。Jessica Hullman 与 gburtch 指出:
- 该研究所谓「所有可构建指标」的对比,主要是 GPT 在评价 Claude 写的审稿意见,即 AI 评 AI,而非人类专家评审
- 更有信号量的部分是 3 位匿名期刊前主编给人类 vs Claude 审稿打分,但只覆盖 10 篇论文,且主编未必熟悉论文领域,似乎只看了审稿意见没看论文本身
- 作者承认 AI 已广泛进入同行评审流程,引入 AI 协助是趋势,但结论被夸大传播了
提醒:看到「AI ≥ 人类」类结论先看清评测者是谁。
「漫话AGI」频道最新
- 博主称大厂推 AI 监管意在清洗小实验室、巩固垄断 — Ghost_Pilot_MD · 2026-10-25
- 投资人类比幼儿发育：进化预训练+样本高效的后训练 — paigeinsf · 2026-10-25
- 开发者感慨：AI 时代编程仍在，心流却回不来了 — generativist · 2026-10-25
- Anthropic CEO：编程将最先被淘汰，但 5% 人类工作仍有价值 — 2C_ornot2C · 2026-10-25
- 研究 22 年劳动力学者：AI 冲击下的问题不是替代而是「需要什么样的人」 — 2C_ornot2C · 2026-10-25
- 研究者断言:机制可解释性永远无法真正解决 — burny_tech · 2026-10-25