腾讯等提出 ActionRoPE:动作编码为坐标实现世界模型空间一致控制
Zhiyang Deng · hf · 2026-10-20
腾讯、新加坡国立大学与南洋理工合作的 ActionRoPE 论文,针对平面相机(planar-camera)游戏世界模型的空间一致性控制问题。
- 将动作驱动的相机运动编码为世界坐标系下的旋转位置编码(RoPE),使同一地标在相机移动前后保持一致的 token 索引
- 配套坐标条件化噪声调度,先生成稳定已观测区域再扩展新内容
- 支持任意相机速度、相机旋转、跨场景泛化等控制能力,实现物理一致的运动与重访
「多模态」频道最新
- 网友把整本《Animator's Survival Kit》喂给 Opus 5.5 做关键帧动画 — MoonL88537 · 2026-10-20
- Glimpse 视觉推理模型发布:对标 Astra 前沿水平 — LinusEkenstam · 2026-10-20
- ComfyUI 里能接 LLM 分析图片,音频该怎么做? — PhilosopherSweaty826 · 2026-10-20
- AI 生成机械巨人对战视频,质感媲美电影 CG — Key_Layer6250 · 2026-10-20
- 开源 ComfyUI 模板打通 YuE2 本地写歌全流程,12GB 显存可跑 — Vivid_Promise1700 · 2026-10-20
- DeepSeek 4.1 Flash 12分钟做视频动效,成本0.2美元自评7.5分 — oran_ge · 2026-10-20