ComfyUI 接入 YuE2 音乐生成:流程分四段,还能改乐谱再续生成
imlo2 · reddit · 2026-09-11
开发者发布 ComfyUI-Olm-YuE2,把新发布的开源音乐生成模型 YuE2 完整接入 ComfyUI,且不只是套个 Generate 按钮:
- 分阶段管线:生成拆为 Plan > Semantic > Synthesize > Decode 四段,中间结果可查看、保存、复用和分支。
- 乐谱 UI(可选):侧栏渲染五线谱、查看/编辑 ABC 记谱,可先生成 plan、手改乐谱,再从编辑版继续生成。
- 输入输出:支持按音乐风格 + 歌词直接生成 48 kHz 立体声歌曲。
- 工程细节:复用 ComfyUI 现有 Torch/Transformers,仅需额外装 tiktoken 和 accelerate;附实测 VRAM 数据(作者在 RTX 5090 测试)与显存 offload 方案;权重不含,README 说明所需 YuE2 文件与放置位置;环境为 CUDA 13.0 + Python 3.13。
仓库已在 GitHub 开源,作者征集 16/24GB 显卡的实测反馈。
所属事件:YuE2 音乐生成模型接入 ComfyUI，可编辑乐谱续写(2 条相关)→
「多模态」频道最新
- 社区插件 Kinocut 让 Hermes Agent 本地剪辑视频，无需 API key — alexcovo_eth · 2026-10-28
- 一键成片来了：两张图加一段音乐全自动生成完整 MV — TinfoilTricorn · 2026-10-28
- 同一 15 秒输入视频，团队 2 小时用 Luma 生成 9 个不同作品 — mrjonfinger · 2026-10-28
- 实测 11 种视频超分方案：本地免费、Topaz 与云端全横评 — lopas99 · 2026-10-28
- AI Horde 志愿者算力网络上线 Moss-Image，免账号免费生图 — Wanabeelee2 · 2026-10-28
- AI 乐队 Techhalla 把 Slipknot 翻唱成 1971 年复古灵魂乐 — Mother-Pear-2392 · 2026-10-28