为工笔人像训练 SDXL LoRA 后弃用:风格越好,人脸检测越失灵
xiaoxuanchuang · reddit · 2026-11-03
一位开发者在做「自拍变中国古代宫廷画」的副项目时,为了省钱自己训练了工笔风格 SDXL LoRA,最终却放弃了它。
训练配置:SDXL base 1.0 + kohya sd-scripts;数据集是从画作中裁出的人脸,用 Grounding DINO 自动检测后人工修正;迭代 3 版,最终选 v3 的第 2 个 checkpoint;推理用 img2img,640×640、25 步、cfg 7.5、strength 0.2、LoRA 权重 0.8。
失败的两个原因:1) 下游用 InsightFace (buffalol) 检测人脸以粘贴进画作,LoRA 输出经常检测不到人脸——风格越像工笔,检测器越「看不见」脸,与流水线目标直接冲突;2) 即使检测到,身份信息也基本丢失,认不出是谁。
他还踩了一个 FastAPI base64 解码的坑(split(',')[-1] 可能返回空串且未处理 padding)。最终改用托管模型完成该步骤,身份保持好得多,LoRA 只留作备用。作者在帖末求助:重度风格 LoRA 有没有办法在 img2img 中保住身份?InstantID 或 IP-Adapter FaceID 是否能救?
「多模态」频道最新
- 设计师用自建 AI 动效工具打造 Geist Serif 宣传片：动效设计工作流正在剧变 — evilrabbit_ · 2026-11-04
- 开发者用 ComfyUI App Mode 搭一表通三模型流水线，灯塔案例全程仅 $0.52 — no3us · 2026-11-04
- CreatorOS Studio 更新：老照片修复上色、UI 内训练角色 LoRA、60+ 工具全本地免点数 — Key_Cap_8111 · 2026-11-04
- RTX 3090 本地视频流水线：3 小时 15 分生成 1 分 22 秒 60FPS 视频 — bmallCakeDiver · 2026-11-04
- LayerShop 0.19 发布：支持最多 5 个 LoRA 叠加与外接 ComfyUI 模型目录 — HonestTicket6013 · 2026-11-04
- 用 Claude Code 联动 Pokee Isaac:六步自动生成卡点歌词视频 — Kyrannio · 2026-11-04