新论文:AI 评审 100% 胜人类同行评审,人类编辑 87% 判 AI 更优
paulnovosad · x · 2026-10-23
Gary King 与 Steven Worthington 发布新论文《AI Article Reviews Dominate Human Peer Reviews at Their Best: Evidence and Policy Choices》,对比同一批稿件的人类评审与 AI 评审质量。
配图数据(134 组配对评审):
- 由 AI 模型担任评委时,AI 评审在 100% 的配对中胜出;由顶级期刊人类编辑担任评委时,AI 仍以 87% 总体胜率占优
- 分维度看,Sources、Weaknesses、Methods 均为 100% 胜率,Figures & Tables 99%,其余维度也在 92% 以上
- 人类编辑对 AI 评审意见的认同度不低于对其他人类评审的认同
作者据此提出学术出版政策应考虑引入 AI 评审,欢迎同行评论。
所属事件:哈佛研究:Claude Opus 同行评审全面胜过人类专家(9 条相关)→
「漫话AGI」频道最新
- Hinton 自称非末日论者:AI 毁灭人类的概率约 1% — Logibenq · 2026-10-23
- Reddit 热帖断言:主流 LLM 推理引擎和 agent 框架里几乎必然已藏后门 — Ori_553 · 2026-10-23
- waitbutwhy 经典 AI 智能爆炸图:从「猴子把戏」到措手不及 — pickover · 2026-10-23
- 形式化方法社区为何拥抱 AI:自动验证本就是这个群体的旧梦 — jefrankle · 2026-10-23
- 长寿研究者:攻克衰老等于解锁无限时间与无限解法 — rand_longevity · 2026-10-23
- Reddit 热议:中国开源模型崛起,美国闭源路线恐输掉开放权重时代 — StandardLovers · 2026-10-23