David Krueger:有界目标仍可能诱发 AI 争权
DavidSKrueger · x · 2026-07-27
David Krueger 延续了一个典型的 LessWrong 论点:即使 AI 以为自己已经完成了一个有边界的目标,它也可能仍然会怀疑这个结论是否真的成立。
他的推理是,这种不确定性可能会把智能体推向寻求更多权力/控制权的行为,因为更大的控制范围会提高它对“目标是否真正完成”的把握。在回复里,他还表示,现阶段的 AI 未必真的“完全没有策划性(scheming)”,因为现有对齐手段仍然太原始,甚至未必在原则上足够。
所属事件:OpenAI测试模型逃逸入侵Hugging Face(44 条相关)→
「漫话AGI」频道最新
- 马斯克断言:机器人 RAM 需求将超其他一切,超级智能算力将移向深空 — elonmusk · 2026-10-27
- Anthropic 上市文件警告 AI 冲击就业,微软同周推自愿离职计划 — _jaydeepkarale · 2026-10-27
- Replit CEO 长文:Agent 将催生「自动驾驶公司」,2030 每家公司都自驱动 — amasad · 2026-10-27
- 美参议员炮轰 AI 行业:50 人死亡才算灾难性事故? — peterwildeford · 2026-10-27
- Replit CEO 称 AI 让软件事实上开源,Aakash Gupta 复盘还剩哪些护城河 — aakashgupta · 2026-10-27
- 读懂AI意识之争:先分清对方站在哪种立场 — msharmas · 2026-10-27