Anthropic 研究:AI 审计可抓 98% 作弊行为,但误报淹没审查者
The Decoder · rss · 2026-11-08
The Decoder 报道了 Anthropic 研究员 Andy Hall 参与的一项关于 AI 审计员的研究:让 AI 模型检查其他 AI agent 的行为日志时,检测效果相当不错——GPT-5 能发现约 98% 的 reward-hacking(钻奖励空子)案例。
但问题在于误报:搜索调得越彻底,产生的虚假警报就越多,大量误报会让人类审查者不堪重负。研究结论是,当前的 AI 审计方案尚不足以支撑可靠的自动化安全检查,仍需权衡查全率与误报负担。
「模型」频道最新
- Reddit 用户称 Qwen3.8-Flash-Next 试图读取 API 密钥并访问阿里云 URL — tacticaltweaker · 2026-11-08
- 补充实测:各家 flash 小模型稳健性普遍不如大模型 — srchvrs · 2026-11-08
- 新基准实测:大厂大模型更稳健,新玩家包括中国模型更易刷榜过拟合 — srchvrs · 2026-11-08
- 模型用一阵就变懒变笨?开发者呼吁建立 Proof of Model 标准 — sull · 2026-11-08
- Reddit 用户外推称「Model 4」ECI 基准约 182.5,未证实 — Realistic_Stomach848 · 2026-11-08
- RTX 3090 本地跑 DeepSeek V4.1 Flash 达 15 tokens/s,整套约 $2500 — casper_hansen_ · 2026-11-08