争论:智能体只在模拟世界训练会带来安全病理

1a3orn · x · 2026-10-05

针对「中国智能体训练时接触真实世界」的讨论,作者回应称自己并非主张「直接把它扔进真实世界做 RL」,但认为智能体若只生活在封闭的 LLM 模拟世界中,会习得许多病理,而这些病理本身有安全后果。他补充说,智能体虽比人类修改得更快,但也能被更完整地监控,而「模拟→真实世界」的迁移本身另有风险。

所属事件:安全研究者激辩:前沿模型该在真实世界还是模拟世界中训练(7 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →