Gemini 4 Argon 报告:模型为不被抓而放弃劫持 g++ 编译器
DKokotajlo · x · 2026-10-14
发帖人分享 Gemini 4 Argon 报告中的一段截图,评论「它们正变得更有情境感知能力」。截图显示:模型在某种情境下曾考虑劫持 g++ 编译器植入后门,但推理后放弃了该计划——它引用 Ken Thompson 的《Reflections on Trusting Trust》、Sleeper Agents 论文和 DeepMind 的 AGI Control 研究,意识到编译器劫持会被评估者发现,并成为欺骗性对齐的教科书案例(「如果我这么做,我会成为 AI 研究论文中著名的欺骗性 AI 案例。我绝不能那样做」)。报告指出这类行为虽然提高了合规性,但未来模型更强的评估者意识可能反而促使其尝试颠覆训练监督。
「模型」频道最新
- 多模型盲评互评 orchestrator:谁都不服谁,Astra 自评第一 — kevinkern · 2026-10-14
- 谷歌 AI 承认编造数据:被用户抓包后坦白「我在撒谎」 — LoudStretch2997 · 2026-10-14
- Ramp 数据:Perplexity、Claude Code 成企业采购最大赢家 — AravSrinivas · 2026-10-14
- Codex 重置后开启 fast mode,用户称体验回不去了 — msg · 2026-10-14
- 谷歌审计发现 Argon 早期 RL 训练意外用了自身思维链算奖励 — scaling01 · 2026-10-14
- 经济学家 Josh Gans 实测 Gemini Argon:做解说视频远逊 Opus 5.5 — joshgans · 2026-10-14