Toby Ord 质疑前沿模型训练算力增益不足以支撑新幂律结论
tobyordoxford · x · 2026-11-09
Toby Ord 与 Basil Halperin、Ramez 讨论一项关于进步幂律的研究:对方可能的回应是实测曲线只是「时间快照」——算力变化而算法/数据质量未变,而历史前沿是两者同时提升,这会影响其头条结论。Ord 进一步指出,(预)训练算力在早期约每 12 个月增长 5 倍,后期更慢,因此按其幂律推算的收益,单靠前沿模型的预训练算力增长解释不通。
所属事件:学者激辩RL扩展规律:算力与时间跨度或呈幂律(10 条相关)→
「漫话AGI」频道最新
- 「基座 cope」:AI 伦理研究者拆解人类默认 AGI 时代的九种错觉 — danfaggella · 2026-11-09
- 开发者担忧:AI 替人判断法律风险是在越界操纵人类 — ezshine · 2026-11-09
- Google Shopping 假日 100 上线:商品点击已改跳 AI Mode — gaganghotra_ · 2026-11-09
- 学者观点:会议审稿真问题是审稿人不合格,而非用 LLM — LucaAmb · 2026-11-09
- Toby Ord回应RL扩展质疑:时间跨度与算力或呈幂律关系 — tobyordoxford · 2026-11-09
- antirez:拒绝 AI 编程辅助的人正明显掉队 — antirez · 2026-11-09