组合两种 LoRA 训练法,相似度反超任一单独方法且收敛快四分之一
shootthesound · reddit · 2026-09-03
作者在 Fizgig 5.2 中把两种针对 H3 的 LoRA 训练方法叠加:
- Optimised Likeness Learning:发现 H3 的身份稳定核心在后 30/50 个 block,照片训练只动 block 20–49,保留构图、解剖与提示词遵循能力。
- Ostris 的训练适配器:H3 经 guidance 蒸馏,普通 flow 梯度一半在「学概念」一半在「抵消蒸馏」;在可训练 LoRA 下挂一个冻结 assistant LoRA,把 base 拉回普通 flow,采样时关闭。
在 5 个数据集、45 epoch、以人脸识别(ARCFace)打分的对照实验中,两种方法单独效果相差不到 2%,组合则提前四分之一达到同等水平、全程领先且终点更高。组合现已设为默认:适配器常开、预览时关闭、不存入成品 LoRA。另新增 Context LoRA(可在任意现有 H3 LoRA 上继续训练,AI-Toolkit 文件直接加载)与视频片段跟随相似度模式。
「多模态」频道最新
- Arcturus 用体育场级捕捉系统演示空间 AI 改造体育转播 — bilawalsidhu · 2026-09-03
- 无人机航拍 + LichtFeld Studio,把小城拍成微缩立体模型 — janusch_patas · 2026-09-03
- invideo 新编辑器实测:聊天指令自动完成剪辑配乐加字幕 — azed_ai · 2026-09-03
- ComfyUI 冷知识:Ctrl+S 直接存进子文件夹 — MoreColors185 · 2026-09-03
- AI 视频实测:蝎子对战 Sub-Zero 格斗短片 — Ok-Giraffe-8670 · 2026-09-03
- 用户让 Tavus 数字人自己造一个搭档,过程一路失控成名场面 — Kyrannio · 2026-09-03