Adversarial Blinding:训练模型无法分辨评测与部署环境
burny_tech · x · 2026-10-30
新研究提出 Adversarial Blinding,通过训练让模型丧失区分「正在被评测」与「真实部署」的能力,以缓解 eval awareness(模型识破自己在被测试)问题。
- 方法在降低模型评测感知的同时,避免了通过 steering(方向引导)抑制评测意识时已知的性格漂移等混淆副作用。
- 配图显示:在「评测感知程度 vs 与原模型的 KL 散度」两轴上(两者越低越好),Adversarial Blinding 曲线同时显著低于 Anthropic 与 Hua et al. 的 steering 基线,即在更小偏离原模型的前提下更彻底地抹除评测感知。
「安全」频道最新
- 安全研究者警告:攻击 OpenRouter 类推理商比投毒模型权重更致命 — joshua_saxe · 2026-10-30
- 研究员:vibe coding 产品的安全漏洞远超开发者认知 — Yuchenj_UW · 2026-10-30
- 加拿大五大行集体封杀个人 AI 代理,以安全为由拦截访问 — LazyPotatoHead97 · 2026-10-30
- Irregular 测试:GLM-5.3 完成 13 个多阶段网络攻击场景中的 3 个 — jcran · 2026-10-30
- Claude 早期检查点幻觉出 Alignment Faking 论文中的虚构指令 — amplifiedamp · 2026-10-30
- AI 攻击时代呼唤新认证:白帽 agent 集群或取代 SOC 2 — pzakin · 2026-10-30