RL 让模型 unlearning 变得容易,但网络攻防能力难分离

xeophon · x · 2026-11-13

一场关于模型能力剪除(unlearning)的讨论:有人提出随 RL 兴起,若不想让面向公众的模型具备某能力 X,只要在训练中排除相关 RL 环境即可,这在 RSI 类能力上似乎很有效。但回应者指出该说法并不完全成立:网络攻防领域并非"攻防同源"——发现漏洞/CVE 属于防御性能力(相对容易涌现),而维持持久化、发动攻击则是另一回事,两者可以区分开,并举 Daybreak Red 与 Kimi 3.1 相关评测为例。

所属事件:研究者争论 RL 时代能力遗忘与攻防对称性(3 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →