SheetSage-Pro 开源:歌曲音频一键转双语文对照可编辑乐谱
affige_yang · x · 2026-11-10
ISMIR 2026 Late-Breaking Demo 项目 SheetSage-Pro 开源(MIT 协议)。输入一首歌(本地音频或 YouTube 链接),输出可编辑的 lead sheet:旋律、和弦符号、由强拍检测得到的小节线、段落标签,以及与音符对齐的中文或英文歌词,支持 JSON、MusicXML 和 MIDI 输出。
流水线串联多个预训练模型并在统一节拍网格上整合输出:
- 源分离:Mel-Band RoFormer
- 节拍/强拍跟踪:Beat This!
- 结构与节拍:All-In-One(+ SongPrep 标签)
- 旋律转录:GAME
- 和弦识别:BTC(默认)、ISMIR2019-LVCR 或 ChordMini BTC-CL
- 歌词转录:SongPrep
- 歌词对齐:Phonsa(中文)、SOFA(英文)
「研究」频道最新
- 作者晒 pSTAT1 与 importin alpha 5 结合的冷冻电镜结构(11GJ) — chaitjo · 2026-11-10
- RAGCap-Bench:细粒度评测 Agentic RAG 中间能力的新基准 — kalyan_kpl · 2026-11-10
- RBA 让 LLaVA-OneVision-2 训练无损提速 3 倍,已合入主仓库 — liuziwei7 · 2026-11-10
- 网络并非尺度不变,为何尺度不变性仍启发了这么多有效方法? — jasondeanlee · 2026-11-10
- SPACE-Tag 预印本发布:高通量空间染色质 profiling 新方法 — anshulkundaje · 2026-11-10
- BAAI 发布 AREX-2:基于 Qwen3.8-27B 训练长程反思,MLE-bench Lite 达 81.8 — xiaohu · 2026-11-10