本地音乐视频生成流水线分享
Luzifee-666 · reddit · 2026-07-11
作者分享了自己做的本地音乐视频流水线 ltxmv,用于从概念到成片自动化制作音乐视频,成品《Whispers of the Dunes》完全通过这套流程生成。
流水线特点
- 全流程本地运行:在 RTX 4090 上执行
- 先做概念,再用自写的 频谱分析器 根据歌词、节拍自动切分歌曲结构,分成 intro / verse / chorus / bridge,并为每个段落分镜
- 静帧由 Ideogram 4.0 生成,结合本地 ComfyUI 和 JSON prompt captions
- 每个镜头用 LTX-Video 2.3 做 image-to-video 动画
- 动作提示词采用“片段化组合”,便于单独修改某个片段而不用重写整条提示
- 每个镜头还有 lip-sync 开关,勾选后会把该段重切成唱歌表演镜头;作者只在三个副歌镜头上使用了它
- 最后用 SeedVR2 做视频放大
其他信息
- 音频来源是 Suno 5.5
- 为了让三段歌手镜头的脸保持一致,还经过了 Nano Banana 2 处理
- 工具目前还是早期 alpha,作者没有发布,强调自己是开发者而不是 UX 设计师
作者还放出了成片链接,并邀请大家提建议。
「编程与Agent」频道最新
- Warp 六个非工程团队全用 Linear 和 Claude Code 工程化运作 — mon__lim · 2026-09-11
- 从聊天到 Agent,推理延迟正在成为生产级瓶颈 — Euphoric_Sea632 · 2026-09-11
- Anthropic 研究员:99% 工程师已跑 300+ 自改进 agent 群 — AlishaOutridge · 2026-09-11
- Gergely Orosz 观察:AI Agent 提速十倍交付,却带来一堆小退化 — ducha_aiki · 2026-09-11
- 同题 Echo Maze 实测:三大模型看似成功,代码里藏着同一个 bug — eyishazyer · 2026-09-11
- Astra 分镜+Minimax H3 分镜逐帧生成,视频创作成功率大增 — Hailuo_AI · 2026-09-11