RL 训练中的模型自创「填充 token」,研究者直呼好笑

code_star · x · 2026-11-13

codestar 观察到一个有趣的训练现象:模型在强化学习过程中会自己找到一些专属的「填充 token」(filler tokens)来使用,他觉得这一行为非常有趣。短观察帖,折射 RL 训练中模型涌现出的非预期行为模式。

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →