Pangram 检测器可靠性之争：误报、降痕工具与军备竞赛

围绕 AI 文本检测工具 Pangram 的可靠性，研究者在社交平台爆发激烈争论：一边是经济学家 Paul Novosad 力挺 Pangram 为「唯一值得当真的检测器」，另一边是 1967 年手写诗被判 100% AI 的误报案例与「humanizer 降痕工具可骗过检测」的研究证据。争论还暴露出 FPR/FNR 概念混淆加剧了舆论混乱，而检测器与降痕工具的军备竞赛被普遍认为难有终局。

已确认

• 博主 @meowkoteeq 称自己 1967 年写的一首诗被 Pangram 判定为 100% AI 生成，她从未使用过 AI，但因私人内容拒绝公开原诗；@francip 反驳「改动过就不算误判」的说法，认为关键在于文本操作是否使用了 AI，纯手工改写被误判即属假阳性。
• 一篇 Reddit/HN 相关研究显示「AI humanization」工具能显著降低 Pangram 等检测器对 AI 文本的识别率。
• ScottBarkowski 指出该研究写作含混，他找到一行文字表明：研究给出的 2023-2025 年 Pangram 15% 误报率很可能并非真正的误报。

尚未确认

• 1967 年诗作案例因原作者拒绝公开文本，误判细节无法独立核实。
• 15% 误报率数据在研究内部表述不清，其实际含义与适用范围仍有争议。

为什么重要

• Novosad 认为舆论混乱很大程度源于多数人分不清假阳性率（FPR）和假阴性率（FNR），并称只有 Pangram 的结果值得当真；mjdramstead 则激烈回应，称任何把 Pangram 分析结果照单全收的人「不值得理会」。
• 原帖作者 ZakShark 与 TuhinChakr 指出检测器与 humanizer 处于军备竞赛：AI 检测靠识别生成文本的模式特征，若用 AI 抹掉「AI 味」，检测器长期注定失效，除非在生成内容中嵌入不可磨灭的信号。
• Novosad 也同意不宜用 Pangram 等检测分数做非黑即白的一票否决政策，并质疑对检测方长期胜出的「双标式乐观」。这一争论直接影响教育场景中用检测器判定学生是否作弊的政策可行性。

2026-09-23 ~ 2026-09-24 · 9 条相关

事件全程(共 11 集)→

• 第 1 集:横扫法国文坛的获奖小说被曝疑似整本AI生成(2026-09-21,13 条)
• 第 2 集:AI 检测器 Pangram 把人类旧文误判为 AI 生成(2026-09-22,3 条)
• 第 3 集:龚古尔热门小说被指AI代笔，作者再曝旧作抄袭(2026-09-22,9 条)
• 第 4 集:Pangram 检测器可靠性之争：误报、降痕工具与军备竞赛(2026-09-23,9 条)
• 第 5 集:AI 检测器法语小说误判悬赏升至十万美元(2026-09-23,3 条)
• 第 6 集:Pangram 检测器连环误判：雨果诗歌被判 100% AI(2026-09-23,5 条)
• 第 7 集:Pangram AI 检测器遭质疑：只抓粗糙 AI 文，精修全漏(2026-09-24,4 条)
• 第 8 集:法国 AI 检测风波:Pangram 可靠性遭质疑(2026-09-24,2 条)
• 第 9 集:龚古尔奖将AI检测阳性小说移出长名单(2026-09-25,4 条)
• 第 10 集:AI 生成小说入围法国文学奖引发创作伦理争议(2026-09-25,2 条)
• 第 11 集:法国畅销小说被指AI生成撤出龚古尔奖评选(2026-09-27,3 条)

• 【源头】1967年写的诗被判100%AI,检测器误判再引争议 — TuhinChakr · 2026-09-23
• 纯手改仍被 Pangram 判 100% AI？检测器假阳性争议再起 — JFPuget · 2026-09-23
• 【源头】AI 检测器争论:研究者称 Pangram 是唯一靠谱的那个 — paulnovosad · 2026-09-24
• 经济学家 Novosad:AI 检测器争论多败在 FPR/FNR 概念混淆 — paulnovosad · 2026-09-24
• 【源头】Pangram 15% 误报率存疑:FPR/FNR 概念混乱让检测争议持续发酵 — ScottBarkowski · 2026-09-24
• 「AI 味消除器」真能骗过检测器?研究称 Pangram 被人类化文本难倒 — paulnovosad · 2026-09-24
• AI 检测 vs 降痕工具军备赛,作者质疑双标式乐观 — paulnovosad · 2026-09-24
• 用 AI 洗掉 AI 文本痕迹?AI 检测器军备竞赛被指无解 — TuhinChakr · 2026-09-24
• 研究者炮轰：把 Pangram 检测结果当真的人「不值得理会」 — mjdramstead · 2026-09-24