本地音乐视频生成流水线分享
Luzifee-666 · reddit · 2026-07-11
作者分享了自己做的本地音乐视频流水线 **ltxmv**,用于从概念到成片自动化制作音乐视频,成品《Whispers of the Dunes》完全通过这套流程生成。 ### 流水线特点 - **全流程本地运行**:在 RTX 4090 上执行 - 先做概念,再用自写的 **频谱分析器** 根据歌词、节拍自动切分歌曲结构,分成 intro / verse / chorus / bridge,并为每个段落分镜 - 静帧由 **Ideogram 4.0** 生成,结合本地 ComfyUI 和 JSON prompt captions - 每个镜头用 **LTX-Video 2.3** 做 image-to-video 动画 - 动作提示词采用“片段化组合”,便于单独修改某个片段而不用重写整条提示 - 每个镜头还有 **lip-sync 开关**,勾选后会把该段重切成唱歌表演镜头;作者只在三个副歌镜头上使用了它 - 最后用 **SeedVR2** 做视频放大 ### 其他信息 - 音频来源是 **Suno 5.5** - 为了让三段歌手镜头的脸保持一致,还经过了 **Nano Banana 2** 处理 - 工具目前还是早期 alpha,作者没有发布,强调自己是开发者而不是 UX 设计师 作者还放出了成片链接,并邀请大家提建议。