作者:下一词预测 2019 年已超人水平,余下皆难词
mlpowered 系列收尾指出,人们对「下一词预测」的印象还停留在手机输入法级别,但语言模型在 2019 年就已在简单预测任务上达到超人水平——容易预测的词早已用完,剩下的都是难词:数学方程的答案、小说结尾的反转、博士论文的结论。要把这些预测好,模型必须先建立对世界的理解,而向模型内部看也印证了这一点。
2026-10-19 ~ 2026-10-19 · 2 条相关
- 作者观点:语言模型预测下一词早在 2019 年已达超人水平 — mlpowered · 2026-10-19
- 剩下全是难词:预测反转与结论,模型必须先理解世界 — mlpowered · 2026-10-19