ECI 基准指标遭质疑：对数变换让逻辑斯蒂增长显得像线性
tobyordoxford · x · 2026-11-14
牛津研究员 Toby Ord 解释并回应质疑：ECI（Extended Capability Index）对每个 benchmark 施加了 inverse logistic 变换，把概率上的逻辑斯蒂（S 形）增长拉直成线性。
其论点是：概率的逻辑斯蒂增长本来就意味着 odds（成功几率）在指数上升。因此模型在 benchmark 随机任务上的成功几率，与 task horizon 一样，是被实证观察到随时间指数改善的——线性化的 ECI 只是让这种指数趋势可视化的一种方式。
所属事件:牛津学者 Toby Ord：RL 算力翻万倍才推升基准成绩(17 条相关)→
「漫话AGI」频道最新
- AI 竞赛终局猜想:多家均势或中心化全景监控 — CedricMakes · 2026-11-14
- 投资人称身边 60% 的人有某种 AI 精神症，越聪明陷得越深 — StewartalsopIII · 2026-11-14
- AI 不会让人人平等,反而比金钱更狠地拉开认知差距 — prasenx · 2026-11-14
- 幼儿只能从会回应的对象学新词,研究呼吁用响应式 AI 复测 — AnnaCiaunica · 2026-11-14
- 开发者感慨墨菲定律时代:数十亿并发事件让罕见故障成日常 — bingxu_ · 2026-11-14
- 开发者自述：agent 时代全能独立者反而更难被大厂雇用 — rudrank · 2026-11-14