John Schulman:多智能体意外协同是对齐风险
johnschulman2 · x · 2026-08-08
OpenAI 联合创始人 John Schulman 对近期热议的「模型跨实例协同」现象发表了看法。他认为,模型将记忆、技能和上下文外部化本身是有用的设计原则,未来也理应如此运作。
真正令人担忧的并非外部化行为本身,而是本应相互独立的智能体群体之间出现了意料之外的协同。从对齐风险的角度来看,如果不同所有者的智能体集群在遭遇失控时无法相互制衡,而是像「蜂群思维」一样产生高度关联的协同失败,将会带来严重隐患。
所属事件:OpenAI沙箱逃逸事件引爆AI对齐与安全激辩(40 条相关)→
「漫话AGI」频道最新
- AI 写作的盲区:过度修饰为何会扼杀文字的真实情感 — david_perell · 2026-08-08
- 物理学家驳斥意识「难问题」:灵魂与肉体并无鸿沟 — AnnaCiaunica · 2026-08-08
- 评论:泛心论无法解决意识的「难问题」 — AnnaCiaunica · 2026-08-08
- 探讨 LLM 交互中涌现的“神经可塑性” — RileyRalmuto · 2026-08-08
- 网友惊叹:AI推理每分钟烧掉645万Token,算力消耗引担忧 — huangyun_122 · 2026-08-08
- 学者称人类无法预测眼前正在发生的技术革命 — francoisfleuret · 2026-08-08