研究者质疑「参数Scaling赢家通吃」论：预训练已沦为少数算力份额

jd_pressman · x · 2026-10-26

研究者 jdpressman 表示自己整体看好 AI，但难以认同 GPT-4 时代「赢家通吃」式的参数 scaling 投资逻辑。他在补充推文中给出核心论据：原始参数之后引入的每一条 scaling 轴（数据、后训练等）都比上一条更稀疏，传统预训练如今显然只占训练算力的少数甚至更少。

这意味着 AI 算力格局并不像铁路那样具备天然垄断属性，「堆参数就能赢者通吃」的投资逻辑因此被削弱——scaling 优势正沿多个维度分散，护城河随每一代范式递减。