Wan-Dancer：分钟级音乐舞蹈生成
pmttyji · reddit · 2026-07-13
Wan-Dancer：分钟级音乐到舞蹈生成
作者提出 Wan-Dancer，用于从完整音乐生成长时长、高分辨率、节奏同步的舞蹈视频，目标是突破现有扩散视频模型在 20 秒左右容易失稳的限制。
核心思路
- 将生成拆成两级：全局关键帧规划 + 局部时间细化，以保证长程一致性。
- 利用完整音乐上下文维持长距离结构连贯。
- 引入 time-mapped RoPE 做动态帧率适配，提升音画对齐精度。
- 使用基于光流的损失增强动作连续性。
- 通过motion-speed control在快速动作下保留细节。
结果与开放内容
- 论文声称在实验中优于传统时长瓶颈方案。
- 可生成超过 1 分钟、720p/30fps 的稳定舞蹈视频。
- 覆盖 5 种舞蹈风格，支持音频和文本条件。
- 已开放模型权重和推理代码，可在 ModelScope Studio 或 Hugging Face Space 体验。
所属事件:Wan-Dancer-14B 开源：支持音乐生成长时长舞蹈视频(6 条相关)→
「多模态」频道最新
- WanGP 一键在 AMD GPU 上跑腾讯世界模型 Hy-Nomas，8GB 显存可用 — cocktailpeanut · 2026-10-27
- 用 Astra 计算机视觉操控 Premiere Pro 剪辑，10 个实用玩法 — beechinour · 2026-10-27
- Galaxy S26 纯端侧跑 MiniMax H3：7 分钟生成 5 秒带音频视频 — BidFunny4862 · 2026-10-27
- Krea 推出 Premiere Pro 插件:剪辑时间线内直接生成视频与音效 — lmoroney · 2026-10-27
- Wan2GP 上架 Pinokio：6GB 显存一键跑 AI 视频生成 — cocktailpeanut · 2026-10-27
- WanGP v18.81 支持 Hy-Nomas 世界模型，8GB 显存可用 WASD 探索 — cocktailpeanut · 2026-10-27