港理工 OmniColor 登 ECCV 2026:统一框架搞定任意组合上色控制信号
jiqizhixin · x · 2026-09-05
香港理工大学与四川大学提出 OmniColor，一个统一的多模态线稿上色框架，被 ECCV 2026 接收。动画师常同时面对文本描述、稀疏色块涂鸦、角色参考图、同镜头近期帧等多种甚至互相冲突的控制信号，现有方法最多处理一两种。
- 核心思路是把输入分为两类：空间对齐条件（线稿、色彩提示、近期帧），需要像素级精度；语义参考条件（文本、角色参考图），不需要。
- 两类条件各用独立的编码策略、训练目标和冗余消除机制，再由自适应门控模块决定融合。
该框架支持任意组合的控制信号输入，解决多信号冲突问题。
「多模态」频道最新
- 开源小模型 TTS 走红:Hojo-TTS-Light 仅 40M/80M 参数 — ZabihullahAtal · 2026-10-23
- Obsidian Light Mirage 提示词模板：用明暗对比打造雕塑感光影人像 — LudovicCreator · 2026-10-23
- AI 生成短片《天空不跪》:骑龙勇士史诗感画面惊艳 — scenemixer_official · 2026-10-23
- AI 生成黑暗骑士系列图：雾气蝙蝠侠与雨夜蝙蝠车氛围拉满 — egeberkina · 2026-10-23
- PixText：不到 1B 参数快速修复 AI 图中乱码文字的模型 — Creepy_Astronomer_83 · 2026-10-23
- AI 视频运镜封神:镜头绕飞单车、钻过脚踏板穿越雨中街景 — umesh_ai · 2026-10-23