JHU与Adobe开源纹理融合系统:多视角渲染图整合为单一无缝纹理
ssh4net · x · 2026-10-29
Johns Hopkins 大学与 Adobe Research/Firefly Foundry 团队(Hongyi Liu、Yifan Wang、Vladimir G. Kim、Misha Kazhdan)发布论文 Texture Consolidation of Generated Multi-View Renderings,代码以 BSD-3 协议开源。
系统解决的问题是:生成模型产出的稀疏多视角渲染图之间颜色、光照不一致,无法直接贴到网格上。整套流程为:
- 反投影与置信度估计:将各视角渲染图反投影到 texture-atlased 三角网格,得到带归一化颜色和置信度的初始纹理;置信度由法线与相机视线夹角、深度不连续性(轮廓附近)共同决定,降低轮廓处 texel 权重;
- 光流对齐:在网格上求解 flow-field,结合置信度将各视角颜色互相配准;
- 梯度域缝合:配准后经 advection 传递颜色,最终 stitching 融合成一张连贯无缝的纹理图。
该框架让图像生成模型可以直接嵌入几何处理管线,为 3D 资产的自动纹理化提供了实用路径。
「多模态」频道最新
- 用 Claude 一句话完成多角色 LoRA 训练,bbox 提示精准锁定角色 — Amazing_Painter_7692 · 2026-10-29
- AI 航拍穿越潘多拉等著名虚构世界,视觉惊艳 — ScriptLurker · 2026-10-29
- 创作者用 AI 生成万圣节短片:血月古堡夜景画面曝光 — DavidmComfort · 2026-10-29
- Fysiverse-3D-Vision 技术报告:单图生成可执行 3D 世界,评论称名字太狂 — teortaxesTex · 2026-10-29
- 音乐生成产品 taan 开放公测:任意多模态输入即时谱曲 — ycombinator · 2026-10-29
- 如果把 GTA6 拍成 K-pop 风格游戏:AI 生成概念片脑洞出圈 — Economy_Editor9812 · 2026-10-29