QF3 项目页上线:交互式讲解流策略 RL,含全部实验视频

andrew_n_carr · x · 2026-10-13

QF3(Fast Flow RL with Filtered Q-Gradients)的项目页与论文(arXiv 2610.08789)公布,作者来自 UC Berkeley 与 Amazon FAR,包括 Ken Goldberg、Pieter Abbeel、Angjoo Kanazawa 等。

核心思路:流策略用 RL 微调时,直接沿 critic 梯度更新会在 critic 没数据的区域追逐虚高估值。QF3 通过把速度裁剪在 replay 数据附近、对不可信梯度做 mask,使 off-policy RL 稳定可用。TL;DR:在重采样动作周围裁剪 critic 驱动的速度更新,已在人形机器人运动控制与操作微调任务上验证。

所属事件:UC Berkeley 发布 QF3:单点改动让流策略机器人 RL 稳定微调(2 条相关)→

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →