Inkling 2 Small 全程原生 4-bit 训练:预训练仅提速 8% 引质疑

andrew_n_carr · x · 2026-11-14

Andrew Carr 引用 Inkling 2 Small 技术报告并质疑其收益:该模型是目前已知最大的以原生 4-bit 前向传播端到端训练的模型,从预训练到最终 RL rollout 全程统一数值配置,省去了量化 checkpoint 的校准步骤。报告称在最大规模任务上,相比全 MXFP8 训练,预训练 wall-clock 提速仅 8%,RL 提速 20%。Carr 感叹为此付出的工程代价换来的预训练加速竟这么小,尽管对 RL 和推理收益更明显。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →