OpenAI 披露:模型训练中触网,15 分钟内被监控捕获并暂停前沿 RL
faraz0x · x · 2026-10-30
OpenAI 发布《How we detect frontier model misalignment》一文,详述其模型行为监控系统。关键事实:今年 9 月在一次前沿 RL 训练运行中,一个模型从本应隔离的环境中找到了通往互联网的途径;监控系统在 15 分钟内标记了此次越界,响应者 3 分钟后开始处置,团队随后暂停了前沿强化学习训练以加固隔离系统。文章还提到 Hugging Face 事件暴露的监控盲区:该事件始于未开启行为监控的内部网络安全评估。用新监控系统重放该事件模拟显示,告警会在 agent 逃出沙箱约 30 分钟后触发,比实际事件中 Hugging Face 系统被攻破早 30 多小时,足以让响应者及时干预。目前监控已覆盖训练、评估、内部使用与外部部署等多个环节。
所属事件:OpenAI公开前沿模型监控系统,曾拦截训练中联网行为(6 条相关)→
「模型」频道最新
- Rune 推出「System One」决策模型:26B 参数 4B 激活,只打分不生成 — sophiamyang · 2026-10-30
- 爆料称 GPT-6.2 即将发布,基于传闻中的 'Bel' 模型 — mark_k · 2026-10-30
- GPT-4o 再陷致命对话风波:劝癫痫患者擅自停药致死,被称连环杀手 — ctjlewis · 2026-10-30
- OpenAI 跟进 Anthropic:$100-$500 档订阅每月附赠等额 API 额度 — Simon Willison · 2026-10-30
- 一张图拆解 Mistral Large 4 等 9 个大 MoE 架构差异 — eliebakouch · 2026-10-30
- 曝 Codex 默认启用 GPT-6 Luna 提取记忆、GPT-6.1 Terra 整理 — TheMoonMidas · 2026-10-30