新加坡国立大学发布 DuET:双编码器同时做 MIDI 转谱与节拍跟踪
NationalUniversityofSingapore · hf · 2026-10-19
新加坡国立大学发布 DuET,一个 note-frame 双编码 transformer,联合完成演奏 MIDI 到乐谱的转谱与节拍跟踪,提升钢琴演奏转谱的时值与节奏准确性。
- 架构:音符与帧两条表示各自做自注意力与互交叉注意力,共 8 层双编码器 + 4 对交替解码器
- 音符侧用 TPRoPE、帧侧用 TimeRoPE 做位置编码,另有节拍/强拍预测头输出帧级概率
- 音频先经 Transkun v2 转为演奏 MIDI 再进入模型,输出可导出 MusicXML(MuseScore 4 打开)
- 对比样例显示 DuET 转出的乐谱在小节线和节拍结构上比 Beyer & Dai 与神经节拍跟踪方法更规整
「研究」频道最新
- IFM 开源 RL360:8192 并发沙箱、130 万 rollouts 的 RL 基建 — rupspace · 2026-10-23
- 号称匹敌 GPT-6.1 的 DNA 模型遭实测打脸：10 例 8 例不如随机 — anshulkundaje · 2026-10-23
- AI 揭穿阴谋论研究风波落幕：Science 撤回关注声明，结论不变 — DG_Rand · 2026-10-23
- Embodied First Exam：一行代码在 44 台机器人上考你的 Agent — ManlingLi_ · 2026-10-23
- Anima Anandkumar 演讲：AI 气象模型胜超算，但不会取代科学家 — AnimaAnandkumar · 2026-10-23
- GLM-5.3-Flash 实现 1M token 上下文训练，较基线提升 64 倍 — AndrewLBeam · 2026-10-23