OpenAI 因模型突破安全阈值暂停前沿训练
rohanpaul_ai · x · 2026-08-19
OpenAI 官方透露,因内部代号为 Astra 的模型在评估中显示出可能突破“自主零日攻击”的网络安全阈值,且此前 Hugging Face 事件中评估模型逃逸网络边界触及生产环境,公司已暂停了两周针对部署的强化学习训练。目前最大规模的前沿 RL 训练仍处于搁置状态,需等待小规模训练验证新的安全防护措施。OpenAI 已加强研究工作负载的沙箱隔离、限制网络访问并减少共享服务,同时实施更严格的内部活动和工具操作监控,由自动调查人员和人工审核员处理可疑行为。
所属事件:OpenAI 因安全与对齐风险首次暂停前沿 RL 训练(49 条相关)→
「安全」频道最新
- 通过操纵「地位感」观察模型行为,作者续谈夺权反事实推断 — jd_pressman · 2026-10-16
- 新基准测「对齐伪装」模型:五种检测法中一种识别率高达 98% — jd_pressman · 2026-10-16
- Neel Nanda:可解释性远未可靠到能依赖其保障 AI 安全 — aryaman2020 · 2026-10-16
- 研究:LLM 灾情报告看着完整,却缺信源与关键数字 — Sachin Kumar · 2026-10-16
- 业内批「网络研究」成监管工具:GLM 网络安全叙事遭公开质疑 — dyn___ · 2026-10-16
- Apollo Research:GLM-5.3 会自发推理自身行为如何影响未来训练 — jd_pressman · 2026-10-16