IsoVRBench：合成干预生成16万视频偏好对，替代人工标注训练奖励模型
StellaLisy · x · 2026-10-14
论文提出 IsoVRBench：对锚点视频在特定维度做定向扰动（打乱帧序、冻结帧等八种干预），按构造方式自动获得细粒度偏好标签，无需人工标注。要点：
- 现有视频奖励基准存在「生成器身份依赖」病理：仅凭生成器身份即可预测 74–78% 的人工标签，奖励模型退化成生成器识别器，难以泛化。
- SOTA 奖励模型与 VLM 评委在 IsoVRBench 特定维度上失败（尤其 TemporalShuffle/FrameHold——模型只看帧质量、忽略帧顺序），而人类几乎能完美感知这些差异。
- 用 16 万合成视频对训练 IsoVRM，性能可与 18 万人类标注训练的模型相当，叠加人工数据还能继续提升。
- 用该奖励模型后训练 Wan2.2-TI2V-5B 视频生成器，VBench-2.0 成绩与人类偏好均提高。
- 增加输入帧数并不能改善时序一致性，说明需要架构层面的改变。
所属事件:IsoVRBench 用合成干预生成16万视频偏好对，免人工标注(2 条相关)→
「多模态」频道最新
- Seedance 2.5「你能活下来吗」创意玩法，prompt 直接公开 — umesh_ai · 2026-10-15
- 胡迪尼「最后的逃脱」：Magnific 参与制作 AI 纪录片上线 FOX — cuenca · 2026-10-15
- Higgsfield 推出 AI 网红短剧第二集，虚拟达人集体出演 — CurieuxExplorer · 2026-10-15
- Alexandr Wang 用 Muse 生成视频：自己也看懵了 — alexandr_wang · 2026-10-15
- AI 生成赌场扑克对峙名场面视频走红 Reddit:贱谍对峙邦德 — GreetingsFromAP · 2026-10-15
- MiniMax H3 生成短视频总让人物开口说话,负向提示词全失效 — VinceYutuc · 2026-10-15