「token 稍微偏离策略了一点」:数学焦虑梗图秒懂 RL 训练崩溃

willcb · x · 2026-10-21

willcb 发帖「when the tokens are a little too far off-policy」,配经典「数学焦虑女士」四格梗图——图中人物面对圆锥体积公式、二次方程、三角函数表满头雾水。

用这张图类比强化学习训练中 token 偏离策略分布时模型的慌乱状态,是 AI 从业者会心一笑的 RL 训练梗。

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →