单模型装下万个 LoRA:TreeAdapter 创新架构重塑生成系统

bdsqlsz · x · 2026-08-06

DiffSynth-Studio 推出了全新的 TreeAdapter 项目,探索将 LoRA 作为模型系统的模块化构建块。该项目基于 40 亿参数的开源模型,成功将超过 10,000 个 LoRA 整合进单一模型系统中。

TreeAdapter 的核心机制是按内容分配 LoRA:它沿着生物分类学逻辑组织海量 LoRA,在推理时仅动态组合相关的路径。在三个生物多样性基准测试中,该架构在 FID、CLIP 和 BioCLIP 指标上均取得领先,且在生成罕见物种时比 GPT-Image-2 更加忠实。

此外,项目还展示了另一项技术 MultiAlign,它通过按时间步分配 MoE LoRA,有效提升了去噪过程中的指令遵循、文本渲染和美学表现。

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →