给 LoRA 加上 3D 身体扫描

tekprodfx16 · reddit · 2026-07-14

作者 fork 了 **AI Toolkit**，加了一个基于 **SAM 3D Body** 的第二阶段训练，让 LoRA/LoKr 不只学脸，还能更好地学到身体形状和比例。他的思路是： 1. 先做普通 LoRA/LoKr 训练，学习触发词和参考照片 2. 再让模型生成图像，用 SAM 3D 扫描生成结果里的身体 3. 用“真实 3D 身体读数”去约束训练，而不是只靠像素和 caption 猜测作者说这能明显改善 **full-body likeness**，在 Krea 2 上可用；脸部训练约 30 分钟，加入 SAM 3D 身体后大约 60 分钟。仓库是 `FedorAiToolkit`，SAM 3D Body 模型在 Hugging Face 上需要 gated access。