LLM技能涌现顺序可预测

DanielKhashabi · x · 2026-07-09

帖子提到一项工作发现：LLM 在训练过程中，各项技能会以“稳定且可预测”的顺序涌现，而且这种顺序在不同模型家族中都比较一致。这类结果更接近对训练动力学和能力涌现规律的研究观察，可用于理解模型能力形成的先后关系。