北大开源 PanDWM:六路相机拼 360° 全景,前馈生成一致 4D 驾驶世界模型
PekingUniversity · hf · 2026-11-18
北京大学发布 PanDWM(Panoramic 4D Driving World Models),开源于 Hugging Face:
- 将六个相机视角拼接成 360° 全景条带,以因果 DiT(基于 SD3,蒸馏为 4 步生成)做全景驾驶视频生成,输入包含全景历史帧、3D 框与 HD map、文本条件与虚拟相机 ray maps;
- 用前馈 3D Gaussian 解码器从潜变量直接提升出像素对齐的高斯点,支持新视角渲染与前推 5 米、左转 30° 等 4D 静态补全;
- 相比多相机基线(如 DiST-4D),生成速度更快,FID/FVD 更优,多帧预测下一致性明显更好。
适用于自动驾驶仿真与世界模型研究。
「具身」频道最新
- NVIDIA 携手 Agile Robots 推出人形机器人 Agile ONE SN,2027 年初上市 — xmercury_one · 2026-11-18
- 深圳 APEC 期间人形机器人端冰淇淋、拳台上互搏 — TansuYegen · 2026-11-18
- Otto 用 Gazebo 为工业 AMR 建数字孪生,Gazebo 社区会将详解实践 — ___Mufasaa · 2026-11-18
- 拇指大小的 Tokkey 硬件登场:让旧 Mac 本地跑大模型 — TejasKumar_ · 2026-11-18
- 「最物理的 AI」:机器人搬数吨重石头,在 Web Summit 现场演示现实世界难度的含义 — MarvinTBaumann · 2026-11-18
- StellarEdge Auriga 技术报告:VGLM 决策接入可验证执行,42 任务成功率 57.74% — jiqizhixin · 2026-11-18