AI 审出临床试验错误,840 份评审中 838 份优于人类均值
RexDouglass · x · 2026-10-29
rustruslan 介绍其团队 AI 同行评审实验的关键补充:为排除模型见过旧论文的可能,他们将同样的错误插入 2026 年发表的 58 项试验(含 7-10 月所有符合条件的开放获取 III 期临床试验),AI 检出率为 58%-99%,且 840 份 AI 评审中 838 份仍优于人类审稿人平均水平。
配套热图显示四个模型在 50 项试验 × 多类评审维度(样本量论证、分配隐藏、盲法、结果一致性、伦理审批等)上的检出率:GPT-6.1 Sol 主要/次要问题检出 94%/81%,Sonnet 5 为 91%/65%,GPT-5.5 为 92%/62%,Kimi K3 为 89%/63%,人类审稿人组明显更稀疏。
所属事件:实测:15 个 LLM 检出论文错误全面超越人类审稿人(7 条相关)→
「漫话AGI」频道最新
- Vicarious 联创 Dileep George 播客:当今 AI 是飞艇,scaling 不够 — kaixhin · 2026-10-29
- DHH:最强程序员用 AI 与最弱不用者差距可达 1000 倍 — tristanbob · 2026-10-29
- 马斯克:超级智能丰裕时代来临,为遥远未来存钱已无意义 — XFreeze · 2026-10-29
- Theo 谈 AI 竞争策略:跑得够快就不用管领先多远 — 0xAllen_ · 2026-10-29
- Anthropic 年化营收 18 个月涨 65 倍,估值倍数从 62 倍降到 21 倍 — PEEEPOOpeeepoo · 2026-10-29
- 从 Engelbart 到 Agent:软件作者反思'增强人类智能'正在失传 — ryolu_ · 2026-10-29