从 GPT 妖怪问题看 Astra 的持续学习蓝本

imjustnewatai · x · 2026-08-25

作者通过分析 OpenAI 关于 GPT "goblin problem"（风格偏好被不断强化）的文章，推测了 Astra 代理的持续学习路径。核心观点是：在可验证的领域（如数学证明、代码测试）中，模型的成功与失败能精准划定能力边界。Astra 通过尝试更难任务、验证器筛选最佳轨迹并隔离失败、利用后训练将两者转化为新检查点，从而生成更难的课程，形成持续迭代的闭环。然而，伯克利的新持续学习基准显示，这一问题在智能体领域仍未完全解决。