港中文 PhysEvolve:用物理引擎验证自生成世界,免人类数据训练物理推理

Jinyuan Hu · hf · 2026-10-28

香港中文大学 MMLab 提出 PhysEvolve,一个 verifier-grounded 的自进化框架,训练 VLM 做因果物理推理。针对的痛点:VLM 在动力学与物理因果问题上不可靠,而训练受限于有因果反事实标注的数据稀缺——观察视频只捕捉了实际发生的那条轨迹。

方法:每轮由共享 VLM 提出可执行世界程序与证据 schema;确定性物理引擎冻结每个有效世界、模拟反事实轨迹作为真值来源,从而既验证模型自拟的环境、又能检验干预下的替代物理结果。由此模型可以自己构造训练题,不依赖人类数据,在多个动力学 benchmark 上提升表现。