学者批同行评审迷信化,LLM 直读论文引争议
8月17日,学者 Rex Douglass 连发多条帖子批评科研生态:直接验证论文内容的成本过高,使大量研究者转向同行评审、引用数等代理指标,他直指这种做法无异于迷信;他同时认为 LLM 已能像方法论者一样真正阅读论文、快速验证问题,但该技术因被视为取代传统方法而遭遇禁用,引发方法论层面的争论。
已确认
- Douglass 的核心批评:实证研究要证明自身连贯性非常困难且昂贵,大量人因此依赖同行评审、引用数等替代指标,形成非理性的迷信,而非直接仔细阅读论文获取实质内容
- 他给出的理由:仅凭元数据去猜测一个 Artifact 的价值,比直接消费该 Artifact 本身还需要更多信息;当评估内容的成本过高,人们便会发明迷信取代思考
- 他称赞 LLM 能像方法论者(而非盲目拥护者)那样阅读论文,提供有据可查的问题排序,让人快速验证问题后继续推进
- 争议点:有人因认为 LLM 取代了传统方法而禁止使用该技术
尚未确认
- 「禁用 LLM」的具体场合、范围与人群,帖子材料未提供细节
为什么重要
- 有回复者对此悲观,认为科学界早已充斥平庸之辈和仪式主义者,普通人关注科学本身就是灾难,LLM 只会带来更多「极其理直气壮的游客」
- 这场争论触及科研评价的根基:按 Douglass 的逻辑,验证成本塑造了围绕元数据的把关机制,若 LLM 把「真正读论文」的成本大幅拉低,这套代理指标体系的正当性将被重新审视
2026-08-17 ~ 2026-08-17 · 5 条相关
一手来源
- LLM 能直接读论文,方法论者称可快速验证问题 — RexDouglass ·
- 学者痛批 Peer Review:替代指标只是迷信 — RexDouglass ·
- LLM能真正阅读论文,引发方法论争议 — RexDouglass ·
- 当评估内容成本过高,人们会发明迷信取代思考 — RexDouglass · 2026-08-17
- 【源头】学者痛批 Peer Review:替代指标只是迷信 — RexDouglass · 2026-08-17
- 批判科研生态:懒惰导致迷信代理指标而非读论文 — RexDouglass · 2026-08-17
- 【源头】LLM 能直接读论文,方法论者称可快速验证问题 — RexDouglass · 2026-08-17
- 【源头】LLM能真正阅读论文,引发方法论争议 — RexDouglass · 2026-08-17