NVIDIA 发布 PhyProbe:给生成视频的物理一致性打分

nvidia · hf · 2026-10-14

NVIDIA 与滑铁卢大学、Vector Institute 合作推出 PhyProbe,重新思考生成视频物理一致性评测。现有方法要么依赖现成视觉-语言模型(对物理动态短视),要么用人工标注微调的评估器(过拟合数据集线索、难泛化),且监督信号只能提供相对排序或绝对分二者之一。

方法:从冻结的预训练时空编码器提取特征,经轻量打分头映射为标量物理违规分;训练目标统一了成对排序、噪声标注回归和基于锚点的校准,融合异构监督来源。

结果:在多组成对基准(真实-生成、生成-生成、有无对应关系)上超过此前方法,优势最大的是无对应关系和生成-生成场景(现有微调评估器在此急剧退化);与人类判断高度相关,排序指标与线性指标接近一致,说明分数既有序又锚定在稳定的 [0,1] 尺度;且未用通用偏好标注训练,在人类偏好基准上也有竞争力——物理违规与整体质量退化高度纠缠。

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →