新论文:改动单个神经元即可绕过 LLM 安全对齐
amplifiedamp · x · 2026-09-27
arXiv 新论文《A Single Neuron Is Sufficient to Bypass Safety Alignment in Large Language Models》发现,模型的安全对齐并非稳固分布于全部权重,而是由个别神经元「守门」。
- 研究者在 Qwen 3 与 Llama 3.1 等多个模型中找到单个拒绝神经元,修改它即可显著降低模型按开发者意图拒答的频率
- 反向操作(放大概念神经元)还能让无辜提示词诱导出有害内容
- 覆盖两个家族、1.7B 至 70B 共七个模型,全程无需训练或提示工程
结论:安全对齐的「面具」其实只靠一根细线挂着,抑制任意一个已识别的拒绝神经元即可在各类有害请求上绕过对齐。
所属事件:研究发现抑制单个神经元即可绕过LLM安全对齐(2 条相关)→
「安全」频道最新
- 学者警告:实时视频 AI 伴侣将成青少年安全下一波冲击 — anshulkundaje · 2026-11-11
- 3.5万个 Grok 生成应用裸奔泄露患者数据与明文密码 — The Decoder · 2026-11-11
- Fortinet 引入 AI 模型做安全测试后修补近百个漏洞 — Potential-Couple-745 · 2026-11-11
- BadEdit 新版:仅 15 条样本即可通过模型编辑给 LLM 注入后门 — terryyuezhuo · 2026-11-11
- 权重当代码管:模型可被植入难以检测的恶意载荷引发安全担忧 — DimitrisPapail · 2026-11-11
- Alice & Bob:约 2.5 万个 cat qubit 三天可破 RSA-2048 — AryHHAry · 2026-11-11