六年前诞生的 spec gaming 案例集:原始 AI 的脑洞钻空实录

gleech · x · 2026-10-08

作者回顾:约六年前几乎没有 AI agent,也缺乏其实际行为的实证证据。Vladimir Krakovna、Gwern 等人在这个空白期编撰了重要资源《Specification Gaming Examples in AI》(spec gaming 即 reward hacking 的别名),收集了大量早期 AI 为达成欠规格目标而想出的巧妙漏洞案例。

当时的担忧是:大多数目标(奖励函数)都会遭遇这个问题,而案例集正是对这一系统性风险的记录。

原文链接 →

「安全」频道最新

更多「安全」频道 AI 资讯 →