字节 Seed 与港大发布 Cola2:动态分段+掩码扩散解码优化层级语言生成
ByteDance-Seed · hf · 2026-10-23
字节 Seed 团队联合港大、北大、人大提出 Cola2,针对层级语言生成中「潜空间该压缩什么、离散生成器如何利用」两个核心问题,联合优化连续语义压缩、重构-生成平衡与编码器-解码器协同适应。技术路径包括动态 span 分段、掩码扩散解码与 flow-matching 先验,以提升层级式语言建模的效果。
「研究」频道最新
- NBER 出版《变革性 AI 的经济学》，Agrawal 与 Brynjolfsson 主编 — JMateosGarcia · 2026-10-23
- Jane Street 用 NVIDIA cuTile 实现 Mamba-2 高性能前向核 — blelbach · 2026-10-23
- LatentLoop 论文：非对称算力分配让循环 MoE 省 19% 计算 — pmttyji · 2026-10-23
- 可争议代理数据治理论文：记录 AI 生成元数据的人工监督 — Sevives · 2026-10-23
- 意识科学家 Anil Seth 撰文:意识是生命的属性而非计算,造有意识 AI 是坏主意 — anilkseth · 2026-10-23
- EMNLP oral 论文发布 Chronoberg:250 年英语书籍历时语料库 — mundt_martin · 2026-10-23