高通VP谈图像生成困局:RL提升可控性、解耦架构冲破分辨率极限
机器之心 · wechat · 2026-09-05
机器之心整理了高通技术副总裁 Fatih Porikli 的访谈,聚焦图像生成从「看起来好」走向「精确可控」的技术路径。
核心问题:现有 T2I 模型在多人身份混淆、复杂空间构图、超高分辨率显存爆炸等方面存在系统性缺陷,难以进入影视预演、广告设计等专业工作流。
团队在 CVPR 提出的方案:
- Disco:用强化学习(GRPO)微调基础模型,将「图内多样性」与「跨次多样性」作为优化目标,独特面孔准确率达 98%-99%,并发布 DiverseHumans 基准。
- Ar2Can:借鉴人类艺术家「先构图后渲染」的思路,将生成解耦为 Architect(结构化布局规划,含 Qwen 边界框预测与 RL 调优的 Flux-Schnell 姿态规划两个变体)和 Artist(基于 GRPO 与组合奖励的逼真合成)两阶段,人数准确率 90.2%、多身份相似度 68.2%,均超对比方法。
- PixelRush 与 InvertFill:分别在超高分辨率生成与图像编辑质量上突破潜空间操作的物理极限。
Porikli 认为图像生成将走向「Agentic」管线:不再依赖单一巨型模型,而是按提示词特征路由给处理多样性、文本渲染或特定风格的专家模型,通过编排实现最优输出。
「多模态」频道最新
- 开源小模型 TTS 走红:Hojo-TTS-Light 仅 40M/80M 参数 — ZabihullahAtal · 2026-10-23
- Obsidian Light Mirage 提示词模板:用明暗对比打造雕塑感光影人像 — LudovicCreator · 2026-10-23
- AI 生成短片《天空不跪》:骑龙勇士史诗感画面惊艳 — scenemixer_official · 2026-10-23
- AI 生成黑暗骑士系列图:雾气蝙蝠侠与雨夜蝙蝠车氛围拉满 — egeberkina · 2026-10-23
- PixText:不到 1B 参数快速修复 AI 图中乱码文字的模型 — Creepy_Astronomer_83 · 2026-10-23
- AI 视频运镜封神:镜头绕飞单车、钻过脚踏板穿越雨中街景 — umesh_ai · 2026-10-23