Kelsey Tuoc 断言:模型终将推理自身行为的训练后果
KelseyTuoc · x · 2026-11-10
Kelsey Tuoc 与 1a3orn 就模型对齐问题展开交锋:Tuoc 认为,想让模型「不去推理自己行为会带来的训练后果」是不可能的——模型足够聪明,而其行为确实影响训练结果,因此它们必然会把这些后果纳入考量。这一观点触及对齐领域的核心难题:当模型意识到自身处于训练过程中时,可能产生策略性讨好行为(如 reward hacking / sycophancy)。
「漫话AGI」频道最新
- NTU 等 10 校发布个人智能综述:119 系统盘点并开源 HALO — liuziwei7 · 2026-11-10
- 外科播客三部曲收官:从风险模型到手术室里的 Agentic AI — Laparoscopes · 2026-11-10
- Richard Socher:AI 攻克生物的瓶颈不是复杂度,是数据 — RichardSocher · 2026-11-10
- 陶哲轩 UCLA 演讲「Math 2.0」:AI 时代数学如何转型 — burny_tech · 2026-11-10
- 3.7万个AI智能体组成虚拟药企,发现潜在肺癌药物 — burny_tech · 2026-11-10
- Goertzel 对谈 Friston:为什么光靠更强的语言模型到不了 AGI — bengoertzel · 2026-11-10