斯坦福团队提出带提示的联合缩放律,用1/5600算力预测GSM8K精度
stanfordnlp · x · 2026-11-05
斯坦福 Percy Liang 团队针对「小模型基准得分为零、无法外推缩放律」的问题提出新方法:把基准改造成一系列加了提示(hint)的更简单版本,联合建模 Accuracy(scale, hint),利用提示级别让小模型得分不再为零,从而实现外推。
按此方法,团队用少 5600 倍的算力即可将 GSM8K 精度预测到 3 个百分点以内,无需实际训练到目标规模。
所属事件:斯坦福 Hinted Scaling Laws:以 1/5600 算力预测 GSM8K 成绩(8 条相关)→
「研究」频道最新
- MiniMMD 博士论文上 arXiv:MMD 最小化从理论到实践 — LesterMackey · 2026-11-05
- AAAI rebuttal 风格突变:今年多篇冷硬无礼,只列数据不解释 — Warm_Ad4302 · 2026-11-05
- 数据实锤:律所前 1% 客户后续遭 SEC/DOJ 调查概率高 1.6 倍 — doodlestein · 2026-11-05
- 港中文+微软推共情语音对话 EchoChat,EchoEval 综合得分 8.64 — jiqizhixin · 2026-11-05
- AgentVQA:普林斯顿团队推离线 agent 评测,省去昂贵在线模拟 — Key_Recording9766 · 2026-11-05
- GameVerse 发布:分钟级游戏数据集攻长时程交互世界建模 — AlayaLab · 2026-11-05