Matrix-3D 单图生可探索 3D 世界全流程开源
8 月 25 日，@mickmumpitz 连发多条帖子，开源了一套完全本地、免费的单图转可探索 3D 世界工作流。整套方法基于 Skywork Matrix-3D，核心思路是在场景中驾驶一架虚拟 360 度无人机，遍历并记录世界，从而生成用于训练 Gaussian Splat 的合成数据集。
已确认
- 方法源自 Skywork 的数据生产方案：在 Unreal Engine 5 中编程虚拟 360 度无人机，飞越 504 个游戏环境，渲染出 116,759 条带真值深度与相机位姿的全景序列，用于训练 Matrix-3D，实现从单张全景图补全完整 3D 世界。
- 工作流分步公开：先用 360° 全景图估计深度生成粗糙网格；相机一移动就会穿帮，Matrix-3D 负责补洞与「想象」照片未拍到的区域。
- 作者将管线移植到 ComfyUI 并接入 lightx2v，还自研了一个无人机路径编辑器，方便在全景场景中规划虚拟相机轨迹。
- 针对 Wan 生成 360 视频上限 720p、铺满球面后画面发糊的问题，作者尝试放大方案但速度太慢，最终改为利用已知相机数据与几何信息，把原始 8K 全景图直接重投影回生成的 360 视频，在保留生成内容的同时拿回高清细节。
为什么重要
- 整套流程完全本地且免费，降低了单图转 3D 世界的使用门槛；合成数据 + Gaussian Splat 的训练范式，以及 8K 重投影保清晰的技巧，对 3D 生成与全景视频社区都有参考价值。
2026-08-25 ~ 2026-08-25 · 5 条相关
一手来源
- 本地免费把单张图片变成可探索的3D世界 — mickmumpitz ·
- 单张全景图造可探索 3D 世界：Matrix-3D 负责补洞与想象 — mickmumpitz ·
- UE5飞504个场景渲染11.6万全景，Matrix-3D补全3D世界 — mickmumpitz ·
- 【源头】单张全景图造可探索 3D 世界：Matrix-3D 负责补洞与想象 — mickmumpitz · 2026-08-25
- 【源头】本地免费把单张图片变成可探索的3D世界 — mickmumpitz · 2026-08-25
- 【源头】UE5飞504个场景渲染11.6万全景，Matrix-3D补全3D世界 — mickmumpitz · 2026-08-25
- 把 Skywork 全景数据管线搬进 ComfyUI，还造了个无人机路径编辑器 — mickmumpitz · 2026-08-25
- 720P全景太糊？直接用8K原图重投影，像素级还原 — mickmumpitz · 2026-08-25