马斯克:预训练明年将面临「数据饥荒」,并吐槽该直接叫训练

elonmusk · x · 2026-11-23

马斯克回应 OpenAI 发布的预训练进展透明化文章《Perplexity and Intelligence》时表示:除非自己漏掉了什么,数据枯竭将成为明年的核心训练挑战。他还吐槽术语:既然有 pretraining 就该有 posttraining,却从没有单独叫 training 的,这就像穿戴整齐去健身然后洗澡、却不真锻炼一样。被引用的 OpenAI 文章则主张基于困惑度等指标设立共同安全上限,超越上限的进展应以理解 AI 行为的能力为前提。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →