研究员论 RSI 规模化:误差换收入曲线或复现预训练规律

tobyordoxford · x · 2026-10-21

牛津研究员 Toby Ord 参与一场关于递归自我改进(RSI)测算的讨论,指出大家想测的其实是 RSI 文献里的 β 参数:如果 CoT 效率(A)的增长是对数级的,那么 β 会随 A 无界增长,迫使 r 趋向于零。

他还类比了预训练 scaling 的历史教训:Kaplan 和 Chinchilla scaling law 显示误差随算力下降极慢(约 compute^1/20),看起来很糟,但现实存在一条把误差转化为收入的惊人函数(如 error^-20),让缓慢的能力提升仍能带来巨大商业回报。

所属事件:牛津学者 Toby Ord:基准 scaling 难外推真实世界收益(4 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →