哲学家 Toby Ord:Elo 线性增长,胜率实为指数增长
tobyordoxford · x · 2026-11-14
牛津哲学家 Toby Ord 在与 Ramez、Ben Todd 等人的讨论中提出:衡量博弈 AI 的根本指标不应该是 Elo(它正比于胜率的对数),而是胜率本身。Elo 多年来呈线性增长,但底层胜率实际在指数增长。
他进一步把这个框架映射到通用能力评估上:
- 胜率概率 ≈ benchmark 分数(典型呈 logistic 增长)
- 胜率 odds ≈ 任务成功率 odds(连续成功次数的期望正好等于 odds;odds 足够高时,中位数时程与 odds 近似线性)
- Elo ≈ ECI(指数能力指数)
由此可以解释为什么 benchmark 分数的 logistic 增长,对应 ECI 的线性增长和任务时程的指数增长——odds 是连接三者的关键桥接变量。
所属事件:牛津学者 Toby Ord：RL 算力翻万倍才推升基准成绩(17 条相关)→
「漫话AGI」频道最新
- AI 竞赛终局猜想:多家均势或中心化全景监控 — CedricMakes · 2026-11-14
- 投资人称身边 60% 的人有某种 AI 精神症，越聪明陷得越深 — StewartalsopIII · 2026-11-14
- AI 不会让人人平等,反而比金钱更狠地拉开认知差距 — prasenx · 2026-11-14
- 幼儿只能从会回应的对象学新词,研究呼吁用响应式 AI 复测 — AnnaCiaunica · 2026-11-14
- 开发者感慨墨菲定律时代:数十亿并发事件让罕见故障成日常 — bingxu_ · 2026-11-14
- 开发者自述：agent 时代全能独立者反而更难被大厂雇用 — rudrank · 2026-11-14