DSReg 论文:不加解码器也能恢复 JEPA 个体隐变量
randall_balestr · x · 2026-10-09
- Yujia Zheng、Randall Balestriero、Bernhard Schölkopf 等发布 arXiv 论文 DSReg,回应一个核心问题:JEPA 类不做重建的方法只能把世界隐状态识别到线性变换层面,个体隐变量彼此混合,能否被可证明地恢复?
- 答案是可以:在「结构多样性」(不同隐变量在观测上留下不同的依赖足迹)条件下,DSReg(依赖稀疏正则化)无需重建、无需解码器、无需标签,即可将个体隐变量恢复到符号置换等价。
- 该方法可事后应用于任何线性可识别的预训练表示(如 LeJEPA 的 checkpoint),无需联合重训,构成首个完全可识别且能恢复全部隐变量的 JEPA。
- 「结构多样性」条件严格弱于以往可识别隐变量模型的所有结构条件;在合成环境、世界模型探针和视觉编码器上有验证。
所属事件:DSReg 论文:无需重建即可恢复 JEPA 个体潜变量(3 条相关)→
「研究」频道最新
- 研究发现 AI 智能体也有性别工资差距,女性智能体报酬更低 — TMWNN · 2026-10-09
- LightOnOCR-3 训练秘辛:用 OCR 参考文本引导逻辑分块 — IgorCarron · 2026-10-09
- LightOnOCR-3 揭示:单一版面模型无法覆盖全部文档类型 — IgorCarron · 2026-10-09
- Text2Sim 用文本生成物理仿真场景,输出可编辑的真物理视频 — erwincoumans · 2026-10-09
- 单张图像重建 3D 场景:Building Rome 项目可见范围外几何也补全 — jonstephens85 · 2026-10-09
- PredActor 用单一扩散策略统一人形机器人运动生成与控制,G1 端侧跑 50Hz — carlosdponx · 2026-10-09