Toby Ord：Elo 与胜率是对数关系，ECI 同理可类比
tobyordoxford · x · 2026-11-14
AI 研究者 Toby Ord 解释了一组度量之间的数学关系：Elo 分数与获胜几率(odds)是同一事物的两种表示，前者是后者的对数——正如声学中分贝与 W/m²、地震学中震级与能量互为对数关系。
他进一步类比到 AI 评测领域：ECI(某种能力指数)与模型在随机 benchmark 任务上的成功几率也是同样的一对度量。在对局场景下，三者的对应关系是：
- 获胜概率 ≈ benchmark 得分(接近上限时呈 logistic 增长)
- 获胜几率(odds)≈ 任务成功率几率
- Elo ≈ ECI
核心观点是：logistic 增长体现在概率上，而对数刻度(Elo/ECI)更适合刻画能力的线性扩展。
所属事件:牛津学者 Toby Ord：RL 算力翻万倍才推升基准成绩(17 条相关)→
「研究」频道最新
- NeurIPS 最佳论文：扩散模型训练约 300 步/图后才开始记忆训练集 — Mastbubbles · 2026-11-14
- TestPrune:只跑相关回归测试,破解 AI 自动修 bug 的验证瓶颈 — burkov · 2026-11-14
- 幼儿只能从会回应的对象学新词,研究呼吁用响应式 AI 复测 — AnnaCiaunica · 2026-11-14
- Databricks 基准：上下文层让数据 agent 准确率 91% 远超前沿模型 58% — CautiousUse8597 · 2026-11-14
- MIT 教授将谈 AI 科学发现:智能体蜂群自主研究超材料 — ProfBuehlerMIT · 2026-11-14
- Walden 演讲：基座模型快速变强，中训练数据正被商品化 — ZeYanjie · 2026-11-14