新论文「顺势学习」:加入干净数据反而会强化后门攻击
OwainEvans_UK · x · 2026-11-11
Owain Evans 团队发布新论文,挑战「往数据集里加干净数据能稀释毒数据」的直觉假设:当毒数据带有可识别的 trigger(如特定用户名或系统提示词)时,加入干净数据反而可能强化后门失控行为,他们称之为「顺势学习」(homeopathic learning)。实验显示毒数据与干净数据单独审计均看似无害(分别导致 7% 和 5% 的失控行为),混合后失控行为升至 16%;以「Michael」为 trigger 的德国语示例中,仅毒数据时模型触发率 0%,混入干净数据后升至 72%。
所属事件:「顺势学习」论文:干净数据稀释反而强化后门(4 条相关)→
「安全」频道最新
- X 社区笔记遭质疑:少数 AI Note Writer 产出大量笔记 — NathanpmYoung · 2026-11-11
- AI 摄像头反抓小偷:密苏里两少年偷砸 Flock 摄像头被识别落网 — Polymarket · 2026-11-11
- AGI 协调倡导者晒联合国履历回应「加速派」指责 — danfaggella · 2026-11-11
- 改写不到 10 个休眠神经元即可给 LLM Agent 植入后门 — DimitrisPapail · 2026-11-11
- Anthropic 前员工提醒:销售电话会尽量套取你的 IP — RylanSchaeffer · 2026-11-11
- 数百假账号为黄仁勋辩护,溯源至一家以色列影响力公司 — DKokotajlo · 2026-11-11