腾讯 ARC 开源 WorldCrafter:隐式 3D 记忆实现分钟级场景漫游
yshan2u · x · 2026-09-23
腾讯 ARC 团队发布视频世界模型 WorldCrafter，核心思路是完全跳过显式 3D 重建：模型学习一个可用相机位姿查询的隐式 3D 感知记忆，指向任意视角时由记忆模块补全该视图。
关键设计是让目标视角决定多视角证据如何压缩进视频生成器有限的 token 预算：记忆编码器与位姿条件读取模块和视频生成器联合训练，在去噪前将历史观测整合为固定数量的目标视角 token，无需显式深度对应。结合近期时序上下文与少步蒸馏，可从单张图片或一段文字出发进行流式场景探索。
实验显示在长时程一致性与相机控制精度上显著提升，可支持分钟级探索。目前分辨率 384×640，架构验证后可扩展。基础版与蒸馏快速版权重均已上 Hugging Face，代码与论文（arXiv:2609.24984）同步开放。
所属事件:腾讯 ARC 开源 WorldCrafter：隐式 3D 记忆实现长程一致探索(9 条相关)→
「多模态」频道最新
- 实测 Firefly 浏览器时间线剪辑：Quick Cut 自动踩点省大量时间 — LudovicCreator · 2026-11-12
- 一条提示词不到一小时,Claude+Blender MCP 生成可玩 3D 游戏 — StrainNo9529 · 2026-11-12
- 一条提示词一小时做出 3D 动作游戏：新版 Fable 实测惊艳 — Cojj25 · 2026-11-12
- 开源离线语音克隆应用 Izwi：Rust 编写，16GB M1 Pro 可跑 — zinyando · 2026-11-12
- 开源 TRELLIS Studio：本地图像生 3D、自动绑骨加 83 套动画 — North_Vegetable8462 · 2026-11-12
- MiniMax H3 Image 生成 3D 游戏场景仅 10 秒,比 GPT Image 快 3 倍 — HeyToha · 2026-11-12