NVIDIA 发布 Foundation4D:纯摄像头实现 4D 感知与重建,无需 LiDAR
jonstephens85 · x · 2026-10-29
NVIDIA Research 发布 Foundation4D,一个面向自动驾驶的统一 4D 感知与重建基础模型,核心亮点是无需 LiDAR 输入。
- 能力:共享骨干网络融合多摄像头、跨时间的视频,输出几何(深度/法线)、3D 目标检测与跟踪、语义占用栅格和 Gaussian Splatting 重建;视频级处理可精化相机轨迹并把目标关联成轨迹。
- 成绩:深度估计在 Waymo/nuScenes 上 AbsRel 0.09、δ1.25 91.97%,显著优于 DVGT、LiAuto-GeoX 等对比方法;相机轨迹估计 ATE 也大幅领先(如 Waymo PGO+LM 下 23.6cm vs DVGT 的 154.5cm)。
- 配套发布:开源 PAI-Foundation4D 基准,含 1,253 段驾驶片段的稠密深度与占用标注,并提供白皮书与数据集。
- 用途:预测的几何与轨迹可作为先验,驱动无 LiDAR 的 NuRec 重建,简化训练数据标注流程。
所属事件:NVIDIA 发布 Foundation4D：纯摄像头 4D 感知助力自动驾驶(2 条相关)→
「具身」频道最新
- CMU等发布SSIO:免标签自监督惯性里程计，覆盖行人到人形六类平台 — GuanyaShi · 2026-10-29
- AA-Robotics 基准出炉:GPT-6 Astra 操控机械臂登顶,仍比人类慢近百倍 — ArtificialAnlys · 2026-10-29
- Rust 视觉定位库 visloc-rs 破 150 星，集成 3DGS 与 SLAM — rsasaki0109 · 2026-10-29
- 研究员收到「自回归咬痕预测」世界模型主题巧克力 — breadli428 · 2026-10-29
- Mundane 推出危险工种替身机器人:让机器人替电工挨电击 — Scobleizer · 2026-10-29
- Empatica 发布 FDA 获批的帕金森居家监测手表 WellPD — RosalindPicard · 2026-10-29