AI检测器在仿写场景下失灵
FlorianGallwitz · x · 2026-07-18
Epoch AI 这项测试比较了几种 AI 检测器在不同文本类型上的表现:
- 对人类写作,检测器几乎不把它误判成 AI 文本。
- 对 LLM 直接生成文本,漏报率很低,约在 0%0.7%。
- 但当要求 LLM 模仿真实作者风格 时,检测器会明显失效:不同工具的假阴性大约在 10%18%。
- 在科学写作场景里,假阴性还会更高,达到约 26%。
图表同时说明了样本量和误差区间,结论是:AI 检测器更擅长识别“直白的 AI 文本”,但面对模仿特定作者的生成内容时可靠性明显下降。
「研究」频道最新
- MissionReport 基准:540 份政府任务报告仅 3 份全达标 — Exp_Mark · 2026-10-27
- Finch 1 发布:用 50+ 种传感器影像训练的通用地理空间基础模型 — Scobleizer · 2026-10-27
- Skyfall AI 推出工程世界模型 SKY-001:文本转 CAD 构建,3.9 秒 vs GPT-6 的 199 秒 — rohanpaul_ai · 2026-10-27
- 物理学家让 AI 自选课题:两小时产出可登顶刊的论文 — burny_tech · 2026-10-27
- 研究者谈评测集透明度:组合性评测仍存数据污染隐患 — najoungkim · 2026-10-27
- 可解释性研究该分清形式与估计器:均值差转向不如直接梯度下降 — johnhewtt · 2026-10-27