港理工 OmniColor 登 ECCV 2026:统一框架搞定任意组合上色控制信号
jiqizhixin · x · 2026-09-05
香港理工大学与四川大学提出 OmniColor，一个统一的多模态线稿上色框架，被 ECCV 2026 接收。动画师常同时面对文本描述、稀疏色块涂鸦、角色参考图、同镜头近期帧等多种甚至互相冲突的控制信号，现有方法最多处理一两种。
- 核心思路是把输入分为两类：空间对齐条件（线稿、色彩提示、近期帧），需要像素级精度；语义参考条件（文本、角色参考图），不需要。
- 两类条件各用独立的编码策略、训练目标和冗余消除机制，再由自适应门控模块决定融合。
该框架支持任意组合的控制信号输入，解决多信号冲突问题。
「多模态」频道最新
- 用户让 GPT-6「创作艺术」，全部画面用 Python 代码绘出 — Worldly_Beginning647 · 2026-09-05
- AI 视频重走《人类简史》时间线,视觉化叙事引关注 — waterarttrkgl · 2026-09-05
- 玩家用 ComfyUI 本地跑 MiniMax H3 参考生视频，做出悬疑短片 — Fleabum · 2026-09-05
- invideo 展示对话式剪辑 agent,30 分钟生成混合媒体视频 — azed_ai · 2026-09-05
- FrankenTTS：纯 Rust 移植 Qwen3-TTS，浏览器本地克隆声音 — BLUECOW009 · 2026-09-05
- GPT-6 Astra 生成含完整内饰的歼星器,升降梯机库皆可动 — ChrisGPT · 2026-09-05