vivo等提出ART妆容迁移,用真实图像监督突破伪目标天花板
机器之心 · wechat · 2026-09-05
ECCV 2026 论文《Anchoring on Reality》(ART)由 vivo 蓝图实验室联合哈工大、南大完成,针对复杂妆容迁移(亮片、脸绘、贴纸)普遍失效的问题。
核心问题：配对数据物理上不存在,行业主流用大模型生成伪目标做监督,但学生的能力被锁死在伪目标质量——「伪目标天花板」。
方法：两阶段训练。Stage I 用伪目标初始化迁移能力并训练辅助卸妆模型;Stage II 将迁移输出保留为可微分「妆容载体」,叠加到参考图素颜版本上重建真实参考图,重建误差作为监督信号反向传播,使监督直接来自真实图像。噪声强度 0.6 为最优。
MF2K 数据集：首个 2K 分辨率真实场景妆容数据集,8,573 张 2048×2048 人像,覆盖素颜/淡妆/浓妆/艺术妆四类。
实验：ART 的 MSimG 在四个测试集全部第一,MF2K 艺术妆上 9.22 对最强基线 8.43;864 次用户盲评三维度均第一。直接验证显示输出质量超过训练伪目标,且换弱生成器(StableMakeup)后仍能大幅超越起点。
启示：配对数据稀缺是现实图像编辑的共性瓶颈,ART 给出「合成数据起步、真实数据监督」的可迁移路径,并首发支持 2048×2048 输出。局限是未显式建模光照与材质。
「多模态」频道最新
- 开源小模型 TTS 走红:Hojo-TTS-Light 仅 40M/80M 参数 — ZabihullahAtal · 2026-10-23
- Obsidian Light Mirage 提示词模板：用明暗对比打造雕塑感光影人像 — LudovicCreator · 2026-10-23
- AI 生成短片《天空不跪》:骑龙勇士史诗感画面惊艳 — scenemixer_official · 2026-10-23
- AI 生成黑暗骑士系列图：雾气蝙蝠侠与雨夜蝙蝠车氛围拉满 — egeberkina · 2026-10-23
- PixText：不到 1B 参数快速修复 AI 图中乱码文字的模型 — Creepy_Astronomer_83 · 2026-10-23
- AI 视频运镜封神:镜头绕飞单车、钻过脚踏板穿越雨中街景 — umesh_ai · 2026-10-23