专题 · FULL STORY
Pangram 误报风波:AI 检测器遭遇信任危机
AI 检测工具 Pangram 将用户 2016 年前亲笔论文判为 100% AI 生成,引发 Gary Marcus 等人参与的误报争议发酵;学界随之讨论对检测结果的理性依赖;随后有作者实测,刻意堆砌 AI 文风的文本仍被判为 100% 人类写作。
2026-10-21 ~ 2026-10-22 · 2 集 · 10 条
第 1 集 · AI 检测器 Pangram 误报争议:多方激辩可靠性(2026-10-21,8 条)
AI 文本检测工具 Pangram 的可靠性在学界引发激烈争论。10 月 21 日起,有用户(@QualiaQuanta)公开吐槽自己 2016 年及更早亲笔撰写的论文被 Pangram 判为 100% AI 生成,Gary Marcus 转发并直接得出结论:不要信任 AI 检测工具。Barbara Biasi 也转发讨论,指出她不断看到人们把各类文档丢进检测工具,一见「AI 生成」结果就愤怒,并追问这种愤怒是否总是合理、检测到底想达成什么目标。
已确认
- 有用户报告 2016 年前人写论文被 Pangram 判为 100% AI 生成(m2)。
- Pangram 官方宣称误报率低于 1%;Paul Novosad 表示自己各类文本的实测误报极少,与官方数据一致,并公开征集被误判的 2022 年前旧作实例(m3、m7)。
- 因为Culture 指出,被点名作为误报证据的样本经复检后站不住脚(m7)。
尚未确认
- 争议中被点名的具体误报样本的真实性存在分歧:一方称有人工旧作被误判,另一方称这些样本经复检不成立,双方均未给出可公开核验的完整数据。
为什么重要
- 争论核心并非单纯技术问题。Jessica Hullman 认为关键在于:当信号有信息量时,依赖它是理性的,说服人们为道德顾虑而做出更差的决定很难(m4)。
- soumitrashukla9 区分了两种情形:自己写作仅用 AI 修拼写语法不会被标记,而被判 100% AI 通常意味着基本是复制粘贴代写(m6)。
- 因为Culture 还提出动机质疑:认为部分声称 Pangram 不可靠的帖子像「审计前公关打掩护」(m5)。Paul Novosad 等人则反思学界「检测即审判」的风气——许多人把文档送检后一见「AI 命中」就声讨,这种滥用检测器审判学术文本的做法本身可能带来反噬(m8)。
- Pangram 检测争议:自己写 AI 修拼写不会被标记 — soumitrashukla9 · 2026-10-21
- Gary Marcus 转发实测:Pangram 检测器把 2016 年人写论文判为 100% AI — GaryMarcus · 2026-10-21
- AI 检测器 Pangram 可靠性质疑声起,发帖人称像「审计前公关」 — BecauseCulture · 2026-10-21
- AI 检测工具 Pangram 频误判,学者质疑愤怒是否合理 — paulnovosad · 2026-10-22
- 研究者质疑 AI 检测器 Pangram 误报率,实测低于 1% — paulnovosad · 2026-10-22
- Pangram AI 检测误报争议:被点名样本经不起复检 — BecauseCulture · 2026-10-22
- 经济学家论「Pangram 值察」:AI 检测器审判学术文本的反噬 — paulnovosad · 2026-10-22
- Pangram 检测分数引争议,学者:依赖有效信号是理性行为 — JessicaHullman · 2026-10-22
第 2 集 · 实测堆满AI文风标记 Pangram仍判为100%人类写作(2026-10-22,2 条)
针对近期针对 AI 检测工具 Pangram 的批评(作者称其为一场制造怀疑、抹黑 AI 检测的公关行动),一位作者进行自测:刻意写一段不属于自己风格的文字,堆满所有典型 AI 写作风标记,如破折号、三连排比等。结果显示 Pangram 仍将该段落判定为 100% 人类写作,说明仅凭所谓「AI 腔」标志词并不能骗过检测工具,也质疑了单纯以文风标记判断 AI 写作的思路。
- 作者实测:全文堆满 AI 腔标志词,Pangram 仍判 100% 人类写作 — BecauseCulture · 2026-10-22
- 作者实测:用满 AI 文风标记写段落,Pangram 仍判定 100% 人类 — BecauseCulture · 2026-10-22