谱对齐训练世界模型:CEM 规划成功率最高提升 22 个百分点
randall_balestr · x · 2026-10-15
Will Peng、Randall Balestriero 等人发布论文《World Modeling through Spectral Alignment》(arXiv:2610.15429),提出 JEPA 框架 SpecWM,解决世界模型的表征应保留什么信息的问题。
核心思路
- 通过目标相似度核(target similarity kernel)显式指定观测之间应保留的关系(如深度、时序距离等元数据),训练编码器在嵌入几何中复现这些关系
- 提供从物理状态监督到仅需轨迹时序顺序的全自监督时序核等多种监督形式
- 给出目标函数全局最优的理论刻画、线性可恢复性与冗余信息不变性条件,并与行为 successor measure 建立联系
实验结果
- 时序谱对齐将 CEM 规划成功率相对 LeWorldModel 平均提升约 51%:OGBench Cube 52%→68%,OGBench Scene 49%→77%,CALVIN 29%→51%
- 核的选择强烈决定表征中可恢复的物理量,说明显式指定表征几何是控制潜变量世界模型保留内容的简单手段
论文与博客已公开。
所属事件:SpecWM 谱对齐框架训练世界模型，机器人规划成功率显著提升(2 条相关)→
「具身」频道最新
- AlphaNIST 单策略通关 20 项 NIST 装配任务,仿真成功率 98.2% — hbouammar · 2026-10-15
- 曼彻斯特大学神经场优化混合制造，GE-Bracket 估算制造时间省 68.3% — jiqizhixin · 2026-10-15
- Leash Bio:用 DEL 数据让 agent 一个周末跑 1 万次药物发现 — Latent Space · 2026-10-15
- 工作照是 AI 的「第一公里」：拍错就无模型可救 — arnabdotorg · 2026-10-15
- LEGO 为自动化仓库打造全向移动车,工程细节曝光 — glenbeer · 2026-10-15
- SlipSense 触觉滑动检测：96.7% F1、23.1ms 延迟、跨平台零样本迁移 — chris_j_paxton · 2026-10-15