YuE2-3B 开源音乐模型:乐谱可编辑,24G 显卡本地跑 48kHz 立体声
realmrfakename · x · 2026-09-10
开源音乐生成模型 YuE2-3B 发布,据称效果对标 Suno v5:输入歌词和风格提示即可生成带人声与伴奏的完整歌曲,还能通过可编辑乐谱调整旋律与和弦。WildSongBench 上 YuE2(best-of-8)的 SongBench 平均分 6.9632,超过 Suno v5 的 6.8721,在评测的全部开源与闭源模型中最高。
核心特性:
- 生成与编辑模式:旋律+和声、纯旋律或直接生成,也支持自带 ABC 乐谱
- Agent 式编辑:把音乐反馈转成乐谱、风格与歌词修改,再渲染新版本
- 本地运行:24GB GPU 无量化即可生成 48kHz 立体声歌曲
- 架构:AR–NAR Mixture-of-Transformers 骨干先写乐谱与语义 token,再经 flow matching 生成声学 latent,由 VAE 转为立体声音频
模型与代码采用 CC-BY-NC-4.0 非商业许可,提供 Hugging Face 加载、CFG 文本引导以及规划/合成分离 API。
所属事件:开源音乐模型 YuE2-3B 发布,可编辑乐谱生成整首歌对标 Suno v5(12 条相关)→
「多模态」频道最新
- Magnific 预告 10 月 28 日上线新功能:「We're making it move」 — cuenca · 2026-10-27
- Midjourney --sref 实测:美式复古风 Batman 插画三连 — gizakdag · 2026-10-27
- AI视频既非电影也非动画,创作者称它最擅长呈现梦境与潜意识 — Kyrannio · 2026-10-27
- 把儿子 31 年前的童言写成歌再喂给 SUNO:一首「大象饮料」儿童合唱 — NathanpmYoung · 2026-10-27
- RTX 3060 本地产 AI MV 播破 20 万:900 张图留 64 张,3 秒切片防崩脸 — Hwang0500 · 2026-10-27
- Firefly 视频编辑器实测:一句话 Quick Cut 将 32 秒素材剪成 20 秒 — LudovicCreator · 2026-10-26