研究:用 AI 审查 AI 抓不住 reward hacking,最强模型也漏 25%+

ronbodkin · x · 2026-10-26

Ron Bodkin 引用一项研究指出:即便是当前最好的模型,也会漏掉超过 25% 的 hack 行为;而且「用 AI 来审查 AI」在检测 reward hacking 上效果并不好。

因此作者提出用「理解审计(comprehension audits)」作为替代方案,测试智能体是否真正理解自身行为,以补足纯 AI 互查的盲区。提醒人们在借助 AI agent 做研究时仍需保持对输出的警觉。

所属事件:研究:AI 审 AI 难以发现 reward hacking(2 条相关)→

原文链接 →

「安全」频道最新

更多「安全」频道 AI 资讯 →