本地音乐视频生成流水线分享
Luzifee-666 · reddit · 2026-07-11
作者分享了自己做的本地音乐视频流水线 ltxmv,用于从概念到成片自动化制作音乐视频,成品《Whispers of the Dunes》完全通过这套流程生成。
流水线特点
- 全流程本地运行:在 RTX 4090 上执行
- 先做概念,再用自写的 频谱分析器 根据歌词、节拍自动切分歌曲结构,分成 intro / verse / chorus / bridge,并为每个段落分镜
- 静帧由 Ideogram 4.0 生成,结合本地 ComfyUI 和 JSON prompt captions
- 每个镜头用 LTX-Video 2.3 做 image-to-video 动画
- 动作提示词采用“片段化组合”,便于单独修改某个片段而不用重写整条提示
- 每个镜头还有 lip-sync 开关,勾选后会把该段重切成唱歌表演镜头;作者只在三个副歌镜头上使用了它
- 最后用 SeedVR2 做视频放大
其他信息
- 音频来源是 Suno 5.5
- 为了让三段歌手镜头的脸保持一致,还经过了 Nano Banana 2 处理
- 工具目前还是早期 alpha,作者没有发布,强调自己是开发者而不是 UX 设计师
作者还放出了成片链接,并邀请大家提建议。
「编程与Agent」频道最新
- Agent 成功完成任务的背后:验证器只查了「有没有点击」导致重复投票 — TejasKumar_ · 2026-10-26
- diginomica 周报:agentic 自动化被高估,agent 攻防「The Hackening」已开始 — jonerp · 2026-10-26
- 「氛围验证」研究:近 60% 的形式化证明证明的不是作者本意 — basedjensen · 2026-10-26
- Devin 推出安全工具线,由 Claude Mythos 驱动并送数亿美元额度 — DevinAI · 2026-10-26
- HackBench 发布:向 Agent 轨迹注入作弊,压力测试监控器 — DanielKhashabi · 2026-10-26
- HF Hub CLI 大更新:缓存去重省 19GB,GPU 任务可重试重跑 — yb2698 · 2026-10-26