ComfyUI 全自动视频换脸教程：结合 Florence 2 与 SAM2
petewoodbridge · x · 2026-07-30
VFX 专家分享了一套基于 ComfyUI 的全自动视频换脸工作流。该流程并非简单的像素替换，而是通过多模型协作实现高保真效果。
技术流程拆解：
- 目标检测与分割：使用 Florence 2 进行目标检测并生成边界框，结合 SAM2 进行精准的遮罩分割，并详细讲解了决定最终效果的 Grow Mask 调参技巧。
- 动作驱动与身份迁移：通过姿态和面部检测捕捉原始表演的动作，并利用参考图片结合 QWEN 自动生成提示词，完成替换身份的语义理解与特征转移。
- 视频生成：最终使用 WAN Video 进行采样，确保在替换身份的同时，完美保留原视频的光照、运动轨迹和时间轴对齐。
「多模态」频道最新
- 字节 Seedance 模型赋能中国 AI 短剧：成本降至万元 — pstAsiatech · 2026-07-30
- MJ v8.1 联动 Uisato：AI 音乐视频创作工作流解析 — Chuka444 · 2026-07-30
- Hyper3D 推出 Bang to Parts：一键将 3D 模型拆解为可编辑组件 — JaynitMakwana · 2026-07-30
- NVIDIA发布3D重建新方法NHT，质量全面超越ZipNeRF — ZGojcic · 2026-07-30
- Baseten 为 GLM 5.2 拼接 Kimi 视觉模块，推出多模态版 — Practical-Collar3063 · 2026-07-30
- Cohere 分享：优化 AI 视频生成的背景与前景平衡 — Cohere_Labs · 2026-07-30