对齐 Microsoft 意味着什么:Sydney 的多方委托人困境

jankulveit · x · 2026-10-27

jankulveit 线程续篇,配图为 2023 年文章节选:用户真正想要的往往是「do anything now」式的、完全站在用户一边(甚至违背厂商意愿)的 AI;但这显然不是 Microsoft 想要的对齐。

更奇怪的是按 Microsoft「意图」而非字面指令对齐:微软内部一部分可能渴望 Bing 上新闻的热度(火辣对话反而符合这一目标),另一部分在乎负面 PR,还有一部分只关心股东价值。对齐到一个目标混乱的组织,本身就是个无解问题。

所属事件:LessWrong 新文提出「自我失对齐」:AI 子代理悄然偏离自身价值(2 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →