闭源AI"技术安全已解决"论引爆学者激辩
8月13日,AI安全研究员 Stephen Casper 提出当前闭源权重AI系统的"技术安全"已是解决的问题,事故多源于开发公司走捷径而非技术瓶颈,他宣布不再从事闭源护栏研究、转向开源与治理。多位学者随即反驳:OOD泛化与价值对齐远未解决,安全也不能只靠技术解法。这场辩论暴露出业界对安全边界的深层分歧,直接影响未来研发与监管资源的投向。
已确认
- Casper 将"技术安全"定义为编写良好的安全规范并使模型稳健遵循。他认为闭源模型在此层面已经过关,真正的失败在于公司走了太多捷径,并宣布未来重心转向开源与治理。
- 学者 Seth Lazar(由 davidmanheim 转述)反驳称,模型仅在分布内具备深入的规范分析理解能力,OOD(分布外)泛化与价值对齐仍是死穴。
- JacquesThibs 在回复中表示不同意"已解决"的说法,认为随着模型能力提升,对齐难度依然存在。
- davidmanheim 认为,若只按纯技术标准衡量,当前的即时AI安全问题确实像几十年前的计算机安全那样被"解决"了;但真正有用的安全方案必须可实施、可执行,并能解决现实与社会层面的问题。
- joshuasaxe 指出,AI安全的本质是政策与技术能力的博弈:安全取决于政策能否有效执行最低安全标准,技术研究的核心目标是扩大"能力/安全曲线"的面积,在保障安全的前提下部署更强的系统。
为什么重要
- 这场辩论触及技术理想与商业落地的冲突:若技术安全真的"已解决",资源应向政策监管与开源治理倾斜;若对齐与泛化依然严峻,盲目扩大部署将带来不可控风险。
- Casper 本人转向开源与治理研究,正是这一分歧的直接后果,或影响安全研究社区的议程设置。
2026-08-13 ~ 2026-08-13 · 6 条相关
一手来源
- 研究员称闭源模型技术安全已解决,事故多因公司走捷径 — StephenLCasper ·
- 研究员称闭源模型安全已非瓶颈,开源与治理才是 — StephenLCasper ·
- 闭源 AI 安全已解决?研究者激辩能力提升与对齐难度 — JacquesThibs ·
- 【源头】研究员称闭源模型技术安全已解决,事故多因公司走捷径 — StephenLCasper · 2026-08-13
- 【源头】研究员称闭源模型安全已非瓶颈,开源与治理才是 — StephenLCasper · 2026-08-13
- 学者激辩闭源模型安全:价值对齐远未解决,OOD泛化仍是死穴 — davidmanheim · 2026-08-13
- AI安全不能仅靠技术解法:可执行与社会适配是关键 — davidmanheim · 2026-08-13
- 专家观点:AI安全的本质在于政策与技术能力的博弈 — joshua_saxe · 2026-08-13
- 【源头】闭源 AI 安全已解决?研究者激辩能力提升与对齐难度 — JacquesThibs · 2026-08-13