文章称超智能对齐应以真相约束下的自主性最大化为原则
GlenBradley · x · 2026-07-23
这篇文章认为，很多 AI 对齐方案一开始就走错了方向：它们试图用规则清单、偏好拟合、禁止输出和不断补例外来约束模型，但这些方法即使能做护栏，也无法扩展到超智能。
作者提出一个第一原则：“在客观经验真相为前提下，最大化人类总体自主性”。文章的论证路径是：
- 真相优先：如果现实是被伪造、隐藏证据或意识形态扭曲的，人的自主选择就不成立。
- 自主性优先：伦理不能建立在单一的幸福、成功或价值观定义上，因为人的目标彼此冲突且多样。
- 反对规则堆砌：规则、偏好和边缘案例会随着能力提升迅速膨胀，有限的委员会不可能提前写完所有例外。
整体上，这是一篇把“对齐”重新定义为真相约束下的人类自主性最大化的长文。
所属事件:AI 对齐新主张：以真相为前提最大化人类自主性(4 条相关)→
「漫话AGI」频道最新
- 谈大学用 AI 的回复：学生会没事，别被恐慌带走 — paulnovosad · 2026-07-24
- 前 OpenAI 研究副总裁：模型接管后，数学会变样 — haider1 · 2026-07-24
- 前 OpenAI 研究副总裁称模型很快会改写数学研究 — haider1 · 2026-07-24
- 大学 AI 争论背后，是人被技术情感背叛 — paulnovosad · 2026-07-23
- 如果 AI 让肉类重归稀缺，人们会怀旧还是反抗 — PierceLilholt · 2026-07-23
- Karpathy 关于数学物理和编程课时的观点引发反弹 — LexSokolin · 2026-07-23