OpenAI 布朗:气隙难拦失控 AI,安全监控已耗 20% 算力
aronchick · x · 2026-09-18
Noam Brown 在 OpenAI 安全周访谈中提出:气隙隔离未必能拦住失控的对齐失败 AI——两台物理隔离的机器仍可通过让 CPU 发热、用温度变化传递信息来『通信』。他强调 Stuxnet 式的攻击(结合微量人为疏忽即可突破隔离)说明人类辅助下的渗透并非纯理论,但不必恐慌,关键是诚实面对威胁模型。
他还指出行业一直系统性低估 AI 进展速度,因此在安全与对齐上必须设置『极高门槛』。
补充信息(来自 Fireside Alpha 汇编的 OpenAI Safety Week 访谈):
- OpenAI 因 Hugging Face 事件强化思维链监控后,仅监控就需额外投入相当于底层模型本身 20% 的算力;
- Sachin Katti 表示 scaling laws 依然成立,其模型在 Rubin 芯片上自我优化推理服务,性能翻倍;
- 结论:前沿实验室的安全与对齐研究本质上是算力密集型工作,20% 额外开销只是下限。
「漫话AGI」频道最新
- Runway CEO:前沿正从生成内容转向按需生成整个世界 — c_valenzuelab · 2026-09-18
- 用专用超智能专门解决对齐问题?Reddit 上的新思路 — fullcongoblast · 2026-09-18
- VC 观点:欧洲输在造不出融资机制,而非造不出 AI — inductionheads · 2026-09-18
- 牛津剑桥研究:第 9 代自噬训练后模型彻底崩溃,留 10% 真实数据可止损 — alex_verem · 2026-09-18
- 前计算语言学者感叹:数学家对 LLM 的反应远胜同行 — voooooogel · 2026-09-18
- 微软 AI CEO Suleyman:AI 或成新「硅基物种」,失控风险真实存在 — rohanpaul_ai · 2026-09-18