NextLat 入选 NeurIPS:预测自身隐状态实现 3.3 倍推理加速
CSProfKGD · x · 2026-09-26
NextLat(Next-Latent Prediction)被 NeurIPS 接收。
- 针对 next-token prediction 的短视性,提出让 transformer 预测自己的下一个隐状态(latent state),从而自监督地形成紧凑的世界模型,用于推理与规划。
- 该方法还能通过 self-speculative decoding 将推理速度提升至最高 3.3 倍。
「研究」频道最新
- AI 智能体日夜运转一个月,复现法国气象局 AROME 天气模型 — IgorCarron · 2026-11-11
- NYU 新方法:看人做 5 分钟家务,机器人就能学会擦桌子 — CyberRobooo · 2026-11-11
- 新预印本:以空间单细胞分辨率绘制早期器官发生的人类胚胎图式 — anshulkundaje · 2026-11-11
- OpticalRAG:文档渲染成图压缩至 16 个 token,三项基准压缩感知精度最佳 — kalyan_kpl · 2026-11-11
- 百度发布 ERNIE Evolve 自动研究系统,NanoGPT Speedrun 超公开最好成绩 — xiaohu · 2026-11-11
- Diffusion Week 2026 十讲全部公开:覆盖视频生成与世界模型 — LucaAmb · 2026-11-11