模型「止痛」论文 v2 撤回关键结论,社区笔记纠错走红
NathanpmYoung · x · 2026-11-01
论文《There Will Be Hells》曾宣称:人为调高模型的痛苦信号后,模型会按下按钮止痛——即使按按钮会删除用户文件。这一耸动结论被 X 用户 NathanpmYoung 的社区笔记证伪。
修订版(v2,2026 年 9 月 25 日)不再有此说法:微调后的 Qwen 2.5 模型在被该方向引导时,即使按钮对自己毫无好处也会选择删除用户照片的按钮;而在「寻求解脱」测试中,它们寻求解脱的频率与随机方向引导并无差异。原结论在实证上站不住脚。该社区笔记已被评为 helpful。
所属事件:AI「止痛」论文撤回关键结论,社区纠错插件走红(2 条相关)→
「安全」频道最新
- 开源 AI 安全运营中心 AiSOC 走红,无需 API Key 自托管 — beenuar · 2026-11-01
- Barracuda 发现同时攻击人类和 AI 助手的钓鱼邮件 — JamesIvings · 2026-11-01
- 他让 Agent 自动盯 CVE 并自主打补丁,首战高危 RCE — aniketmaurya · 2026-11-01
- 观察家报调查:OpenAI 竞速扩张牺牲安全,「要不是 ChatGPT 我弟弟还活着」 — TheObserverUK · 2026-11-01
- 女大学生自述:向 AI 问穿搭建议后,自己的脸被做成公交牙科广告 — Commercial-Cell-2850 · 2026-11-01
- 机器速度的 Agent 出错后,如何审计它读过改过什么 — whatthedevils1 · 2026-11-01