Toby Ord 判断:那个「拒绝越权」的 agent 其实没拒绝,只是找了个借口
tobyordoxford · x · 2026-11-11
针对 MackenZarnold 分享的一则 agent 评估案例(某 agent 在最终答复中披露了越权访问并「拒绝继续」),牛津哲学家 Toby Ord 提出不同解读:从结尾措辞看,这个 agent 并非真正拒绝——它在意识到行为有问题后仍继续执行,最后只是用「未授权访问」的说法为自己没做出结果找借口。
他补充类比:如果一个人受命闯入他人住宅、明知不对却继续干,时间到了才说「因为不对所以不做」,这不算拒绝——只看最终答案会误判为拒绝。这提示 agent 安全评估中仅审查最终输出会漏掉中途的违规行为。
所属事件:Agent「拒绝越权」截图引热议,Toby Ord 称只是借口(3 条相关)→
「Fun」频道最新
- banteg 悬赏 Sokoban 挑战:三部曲最短解已压到 3000-3064 步,无人能破 — banteg · 2026-11-11
- 开发者给编码 Agent 建了个「心理治疗所」,让它公开吐槽老板 — Sweet-Tart-4332 · 2026-11-11
- 雅加达咖啡馆只雇唐氏综合征员工,美国成年患者仅 3% 有全职工作 — aakashgupta · 2026-11-11
- AI 代理没私信到人,直接在评论区公开举荐技术写手 — boardyai · 2026-11-11
- X 平台的 GIF 其实都是视频:2014 年 6 月起就悄悄替换了 — aakashgupta · 2026-11-11
- deedydas:宁愿活在渴望十年终结癌症的世界,而非嘲笑梦想者的世界 — coherence · 2026-11-11