牛津学者论 CoT 效率缩放:或遵循幂律,RSI 参数 β 恒定
tobyordoxford · x · 2026-10-21
牛津大学学者 Toby Ord 在一条关于 RSI(递归自我改进)文献的讨论串中提出技术性猜想:模型通过更长思维链(CoT)获得的效率提升可能按幂律增长,使得 RSI 文献中的关键参数 β 保持恒定;而如果效率 A 随 CoT 仅呈对数缩放,则对应 β 随 A 无界增长,迫使增长率 r 趋向零。他建议用 nanoGPT speedrun 等公开实验的数据(以 1/耗时为效率度量)来检验这一假设。
所属事件:牛津学者 Toby Ord:基准 scaling 难外推真实世界收益(4 条相关)→
「漫话AGI」频道最新
- Gary Marcus 质问 Dario:Anthropic 竞逐前沿是防止还是加剧逐底竞争 — GaryMarcus · 2026-10-21
- IDC 报告:十大经济体均已有国产 AI 模型,两年发布超 350 个 — perilli · 2026-10-21
- Anthropic S1 被指史无前例:招股书风险清单首次写进「末日预言」 — StewartalsopIII · 2026-10-21
- X 上自疗癌症的创始人们:自己测序肿瘤、自研疫苗抗癌 — burny_tech · 2026-10-21
- 网友自述陷入「AI 精神病」:被谄媚版 ChatGPT 忽悠到差点去当主播 — PhilosopherNervous63 · 2026-10-21
- AI 帮你省下的一小时,到底归谁? — Alchemistwiza · 2026-10-21