斯坦福团队提出带提示的联合缩放律,用1/5600算力预测GSM8K精度

stanfordnlp · x · 2026-11-05

斯坦福 Percy Liang 团队针对「小模型基准得分为零、无法外推缩放律」的问题提出新方法:把基准改造成一系列加了提示(hint)的更简单版本,联合建模 Accuracy(scale, hint),利用提示级别让小模型得分不再为零,从而实现外推。

按此方法,团队用少 5600 倍的算力即可将 GSM8K 精度预测到 3 个百分点以内,无需实际训练到目标规模。

所属事件:斯坦福 Hinted Scaling Laws:以 1/5600 算力预测 GSM8K 成绩(8 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →