李飞飞 World Labs 发布全模态世界模型 Atlas
9 月 2 日,李飞飞创立的 World Labs 正式发布下一代世界模型 Atlas,官方称其为全球首个多模态世界模型,定位为面向空间智能的全模态世界模型(omni world model),数周内开放早期访问。社区反应普遍积极,多位演示者展示了单图 3D 场景补全、三机位 4D 重建、机器人仿真数据生成等此前难以实现的能力,被视为空间智能方向的标志性进展。
已确认
- 架构:Atlas 基于单一统一架构——一个从零预训练的多模态自回归扩散 Transformer,融合了现代 LLM 与视频模型在架构、算法与系统层面的进步;所有输入模态汇入共享「空间上下文」,生成结果在 3D 上保持一致。
- 模态与能力:原生处理文本、图像、视频、相机姿态与深度等多种模态(含 3D 输入),从场景输入中构建持久空间理解,不仅能重建观察到的内容还能生成未见部分;可从单张输入图像重建并补全大场景(XRarchitect 演示了单图生成完整 3D 场景,技术栈结合 Atlas、spark.js 与 three.js);通过重构视频模拟时空;原生输出 3D 空间;可将多张姿态图像合成为一致的 3D 世界;生成图像与视频帧时支持像素级相机控制,视频最长 1 分钟、分辨率可达 1440p;支持基于相机控制的稀疏帧生成,用户只需提供几张图像和确切相机位姿即可生成一致的 3D 帧。
- 4D/动态重建:markk 演示仅用 3 台摄像机输入即可重建高保真 4D 视频,认为这种效果此前完全不可能实现;venturetwins 也展示了基于三台手机固定机位素材重建完整场景、从全新角度重新拍摄视频的能力,认为这突破了传统拍摄限制,为影视创作和后期制作带来革命性可能。
- 3D 重建表现:据转发内容(含李飞飞转发 Justin Johnson 的发布),Atlas 从单张到多张输入图像显式输出 3D 结构,性能超越顶级开源重建模型,且随输入图像增多、上下文更丰富,幻觉更少。
- 机器人仿真:据 World Labs 官方介绍,只需少量照片即可重建一个空间,并生成任意轨迹下机器人传感器会观测到的照片级 RGB 与深度数据,使机器人能在远多于以往的空间中训练与测试,还指向 Real-to-Sim 应用前景。
- 影视应用:Jon Barron 转述团队演示称,利用 Atlas 对空间结构与时间演变的理解,用少量普通相机(演示中约 35 部手机)即可搭建「子弹时间」多视角拍摄工作室,捕捉冻结时间的动态瞬间,还能补全相机实际未拍到的场景并在时间静止状态下重新构图运镜;minchoi 亦演示了将其用于体育分析等场景。
- 业界评价:BenMildenhall 指出 Atlas 不只是强大的文生图生成器,还具有丰富的「世界知识」,在单视图和多视图任务上均具通用性,可在高度风格化场景中做精确 3D 控制;mildlyphd 等亦认为公开演示效果相当不错,具体可用性细节仍待官方披露。
尚未确认
- 公开演示之外的具体能力边界、定价与开放范围等细节尚未由官方完整披露,早期访问的实际体验有待观察。
为什么重要
- Atlas 将世界生成从平面图像/视频推进到原生 3D 空间与时空模拟,是空间智能方向的代表性进展。
- 其传感器级仿真数据生成能力直接面向机器人训练这一高价值场景,有望显著扩展机器人可测试环境的规模与多样性;低成本多视角重建能力也为影视创作、体育分析与后期制作打开了新空间。
2026-09-02 ~ 2026-09-03 · 64 条相关
- 第 1 集:李飞飞 World Labs 发布全模态世界模型 Atlas(2026-09-02,64 条)
- 第 2 集:World Labs 发布 Atlas 世界模型加速机器人训练(2026-09-02,4 条)
- 第 3 集:社区验证:Atlas 输出可蒸馏出显式 3D 网格(2026-09-02,4 条)
- 第 4 集:李飞飞团队发布世界模型 Atlas,新视角预测成 AGI 基础原语(2026-09-04,10 条)
- 第 5 集:World Labs 发布全模态世界模型 Atlas(2026-09-07,5 条)
一手来源
- World Labs 发布空间智能全模态世界模型 Atlas,将开放早期访问 — theworldlabs ·
- World Labs Atlas:几张照片重建空间,生成机器人传感器级仿真数据 — theworldlabs ·
- World Labs 发布世界模型 Atlas:可从图像视频生成仿真 3D 世界 — mark_k ·
- 【源头】World Labs Atlas:几张照片重建空间,生成机器人传感器级仿真数据 — theworldlabs · 2026-09-02
- Atlas 架构揭秘:多模态自回归扩散 Transformer 从零预训练 — theworldlabs · 2026-09-02
- 【源头】World Labs 发布空间智能全模态世界模型 Atlas,将开放早期访问 — theworldlabs · 2026-09-02
- The World Labs 发布 Atlas:支持像素级相机控制 — Scobleizer · 2026-09-02
- 李飞飞团队发布 Atlas:首个像素级相机控制的多模态世界模型 — Chris_Armstrong · 2026-09-02
- Atlas 实现普通相机阵列的“子弹时间”多视角拍摄 — jon_barron · 2026-09-02
- 李飞飞转发:World Labs Atlas 用7张图生成1分钟1440p视频 — drfeifei · 2026-09-02
- World Labs 的 Atlas 模型显式输出 3D — drfeifei · 2026-09-02
- WorldLabs 发布 Atlas 模型,致力于从 2D 视图恢复 3D 世界 — smtabatabaie · 2026-09-02
- Atlas 发布 AR 全能模型,3D 重建击败所有专用模型 — Scobleizer · 2026-09-02
- World Labs 发布 Atlas:支持像素级相机控制的世界模型 — gowthami_s · 2026-09-02
- Atlas 模型支持疯狂运镜与 3D 重建,生成视频可控性拉满 — RexDouglass · 2026-09-02
- Atlas 展示:补全未拍场景与任意视角重拍 — jon_barron · 2026-09-02
- AI 生成的图像和全景效果惊艳 — gowthami_s · 2026-09-02
- 新模型 Atlas 兼具文生图与 3D 控制能力 — BenMildenhall · 2026-09-02
- World Labs Atlas 单图生成完整 3D 场景 — XRarchitect · 2026-09-02
- 一张输入图生成完整 3D 场景:World Labs Atlas 补全世界 — XRarchitect · 2026-09-02
- Atlas 世界模型仅用 3 台相机重建 4D 视频 — mark_k · 2026-09-02
- World Labs 发布 Atlas 空间智能世界模型 — Tkins · 2026-09-02
- World Labs 模型惊艳:多机位重构视频场景 — venturetwins · 2026-09-02
- 李飞飞转发:Atlas 可融合现实重建与想象世界生成 — drfeifei · 2026-09-02
- Atlas 实现照片转仿真,支持机器人训练数据生成 — drfeifei · 2026-09-02
- World Labs 推 Atlas 模型,融合扩散与 Transformer — FinanceYF5 · 2026-09-02
另有 27 条近重复转述:kamalgupta09 · georgiagkioxari · drfeifei · cihangxie · drfeifei · gowthami_s · gowthami_s · mark_k · jasteinerman · jasteinerman · pbaylies · viksit · mark_k · kdexd · venturetwins · drfeifei · smtabatabaie · 量子位 · APPSO · FinanceYF5 · FinanceYF5 · 智东西 · drfeifei · CSProfKGD · 创业邦 · 机器之心 · drfeifei