为游戏 3D 动画寻找双视角同步视频模型:Flow、Wan 2.2 均不达标

Flying_Scorpion · reddit · 2026-10-31

做游戏 3D 角色动画管线的作者遇到瓶颈:需要一段分屏视频,同时从前、侧两个固定机位呈现完全相同的动作,逐帧一致(哪条腿迈步、脚何时落地、手臂位置),两次「相似但不相同」的表演不行。

其管线:UniRig 自动绑骨 → 用约 3000 张关节极限内随机姿态的正/侧渲染训练 DINOv2 关节定位模型 → 图生视频驱动分屏参考图 → 剔除两视角不一致的片段 → 双视角三角化重建 3D 关节 → 驱动原始角色。关节定位模型另有已知动作的「考试」来对比 ground truth。

卡在视频生成环节:试过 Google Flow 和 Wan 2.2,结果不稳定;正在试 Seedance 2.5、MiniMax H3 和 Stability AI 的 SV4D 2.0。征询:哪些模型/工作流能保持双视角动作一致、单次分屏生成是否可行、有无参考图布局或相机控制能改善同步,偏好开源/本地方案。

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →