0在 ComfyUI 中对 Anima 模型与 LoRA、其他微调模型进行融合,得到自定义专属风格。
也可使用 Nova Anima 官方提供的 GUI 工具(本地需 16G+ 内存),但社区缺乏验证,本教程统一使用 ComfyUI 原生方案
模型融合本质是把两个模型的风格偏向进行合并,按初始层、中间层、最后层分配不同比例,决定融合后偏向哪种风格。
| 方式 | 说明 | 适用场景 |
|---|---|---|
| LoRA 嵌入(Embed) | 把 1~4 个 LoRA 叠加权重嵌入到模型里,保存为新的 Diffusion Model | 想固化某种风格组合 |
| 简单融合(Simple Merge) | 按单一比例参数融合两个模型,无需分层设置 | 快速测试风格混合 |
| Model Merge Block | 分初始/中间/结束三段设置融合比例 | 精细控制不同层的风格权重 |
| LoRA 提取(Extract/Subtract) | 用微调后模型减去原始 base 模型,提取出差异作为新 LoRA | 把已有微调模型转换为可移植 LoRA |
ModelMergeBlock 或 ModelMergeSimple⚠️ 注意:对近期大幅微调过的模型(如 WAI Anima 1.0)做 Extract,效果可能不理想,需要反复调整系数
如需完全微调大模型(而非融合),需将 LoRA 训练配置中的 network type 从 LoRA 改为 Full Finetune。
全量微调对数据集要求很高,至少需要 几千张图片,否则效果不佳
融合后的模型可以继续作为 base 模型用于训练:
四种方法可以组合使用:嵌入 LoRA、简单/分层融合、LoRA 提取,配合全量微调,可以灵活打造个人专属风格模型。
