新缩放定律 Skaling:恢复模型与数据的交互项

TimDarcet · x · 2026-08-26

Chinchilla 缩放定律将损失写为模型大小和数据两个独立项之和,忽略了交互作用,导致在推算时预测偏差。提出的 Skaling 新定律通过引入一个指数项,重新加入了模型与数据的交互影响,从而修正了外推预测的准确性。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →