两类任务族反例质疑 AI 加速辩论:同一能力、两种弯曲的刻度
TheDavidSJ · x · 2026-11-06
在关于「AI 进步加速是否真实」的争论中,TheDavidSJ 给出一个技术性反例(附图):设有两类任务族——
- 在 A 族上,模型成功的 log-odds 随技能线性增长;
- 在 B 族上,log-odds 随技能的某个光滑凸函数线性增长,每多一单位技能在 B 上获得的 log-odds 增益约比前一单位多 65%;
- 两个族只是用不同弯曲程度的刻度衡量同一进步,都不随日期改变,也没有哪个是「真正」的刻度。
这个反例意在说明:观察到的「加速」可能只是刻度选择的产物。Yafah Edelman 回应称,细读问题后认可 eci 的增量在不同规模间应当可比。
所属事件:Epoch 研究员激辩 AI 加速是否真实:ECI 方法论遭质疑(7 条相关)→
「研究」频道最新
- 240 个随机向量里挑出的「随机方向人设」,模型化身茶壶与整数 — Sauers_ · 2026-11-06
- 随机注入向量让 Qwen3-30B 相信自己是猫,激活转向实验走红 — Sauers_ · 2026-11-06
- 通过放大单个专家激活,Qwen3-30B 被注入出全新人格 — Sauers_ · 2026-11-06
- 哈佛团队提出多模态文件系统记忆,零训练让 Minecraft 智能体持续进化 — du_yilun · 2026-11-06
- 转向 Qwen3 单个 MoE 专家可让模型自称「有点困惑但还在」 — Sauers_ · 2026-11-06
- Inria表格数据研究者Holzmüller加入NVIDIA,推进开源基础模型 — JFPuget · 2026-11-06