3.2 LoRA 模型

3.2.1、什么是 LoRA

LoRA(Low-Rank Adaptation,低秩适配)是一种轻量级模型微调技术。它不改变 Checkpoint 大模型的主权重,而是训练一组小巧的附加权重(通常几十 MB 到几百 MB),在生成时动态注入到大模型中,实现对特定风格、人物、概念或画质的精准控制。

核心特点

  1. 体积小:通常 10MB–500MB,远小于 Checkpoint(2–23GB)
  2. 可叠加使用:一个工作流中可同时加载多个 LoRA,混合不同效果
  3. 即插即用:切换 LoRA 比更换 Checkpoint 快得多,不改变底模基础能力
  4. 训练成本低:个人用户可用少量图片训练专属 LoRA

3.2.2、LoRA 分类与常用模型

分类

侧重点

代表模型/系列

说明

适用底模

人物/角色 LoRA

固定特定人物形象、面容、姿态

Taiwan Doll Likeness、Korean Doll Likeness、Japanese Doll Likeness、Gacha Splash、Realistic Vision 人物增强

最热门的 LoRA 类型,用于固定虚拟角色或真人形象,避免每次生成面部随机变化

SD 1.5 / SDXL / Flux

风格 LoRA

模拟特定艺术风格、画师画风

Ghibli Style(宫崎骏风格)、Cyberpunk Style、Oil Painting Style、Pixel Art Style、Chinese Ink Painting、Anime Lineart

让图像呈现特定视觉风格,如油画、赛博朋克、水墨、像素风等

SD 1.5 / SDXL / Flux

服装/道具 LoRA

控制特定服装、配饰、武器

Cheongsam(旗袍)、Kimono、School Uniform、Medieval Armor、Sci-fi Weapon

精准控制角色穿着和手持物品,常用于角色设计和电商场景

SD 1.5 / SDXL / Flux

画质/细节增强 LoRA

提升图像整体质量、锐度、细节

Detail Tweaker、Add More Details、EpiCRealism Helper、SDXL Detail

不改变风格,专门增强画面精细度和真实感,可与其他 LoRA 叠加

SD 1.5 / SDXL / Flux

概念/场景 LoRA

特定场景、氛围、概念控制

Isometric Room(等距房间)、Interior Design、Food Photography、Macro Photography

控制生成特定类型的场景构图和氛围

SD 1.5 / SDXL / Flux

NSFW/成人 LoRA

成人内容方向(Civitai 等站常见)

大量匿名/社区模型

Civitai 上数量庞大,需注意平台规则和当地法律

SD 1.5 / SDXL

姿势/动作 LoRA

控制人物特定姿态、动作

Yoga Pose、Running Pose、Sitting Pose

配合 ControlNet 使用效果更佳

SD 1.5 / SDXL / Flux

光影/特效 LoRA

控制光线、色彩、特效风格

Cinematic Lighting、Neon Glow、Volumetric Fog、Golden Hour

专门调控画面的光影氛围,增强画面情绪

SD 1.5 / SDXL / Flux

Flux 专属 LoRA

针对 Flux 架构优化的各类 LoRA

Flux Realism LoRA、Flux Anime LoRA、Flux Portrait LoRA、Flux NSFW LoRA

2024–2025 年新兴,随着 Flux 成为主流,专属 LoRA 快速涌现

Flux 专用

3.2.3、各底模生态 LoRA 现状

底模

LoRA 生态丰富度

特点

SD 1.5

⭐⭐⭐⭐⭐ 最丰富

历史最久,Civitai 上数万个人物/风格 LoRA,但质量参差不齐

SDXL

⭐⭐⭐⭐ 丰富

质量普遍高于 1.5,但数量略少,Pony Diffusion XL 生态尤其活跃

Flux

⭐⭐⭐⭐ 快速增长

2024 下半年爆发,目前新增 LoRA 最多,质量上限最高,未来主流

3.2.4、LoRA 使用要点

要点

说明

触发词(Trigger Words)

大多数 LoRA 需要特定触发词激活,下载时务必查看作者说明

权重调节

ComfyUI 中通过 LoraLoader 节点调节权重(通常 0.5–1.0),过高会导致崩坏

多 LoRA 叠加

可同时加载 2–5 个 LoRA,但权重总和建议不超过 1.5–2.0,避免冲突

底模匹配

LoRA 必须与对应底模匹配(SD 1.5 LoRA 不能用于 SDXL/Flux),但 Pony XL LoRA 可在 SDXL 底模间通用

训练工具

常用 Kohya_ss、AI-Toolkit、Flux Gym 等工具自行训练专属 LoRA

3.2.5、LoRA 下载平台

平台

地址

特点

Civitai

civitai.com

LoRA 资源最全面,分类清晰,支持在线预览

LiblibAI

liblib.art

国内平台,中文 LoRA 丰富,下载速度快

Hugging Face

huggingface.co

官方和开发者发布地,适合找高质量官方 LoRA

吐司 TusiArt

tusiart.com

国内社区,支持在线运行 LoRA 测试效果

3.2.6、一句话总结

LoRA 是 ComfyUI 的"调味剂"——Checkpoint 决定"能不能画",LoRA 决定"画得像什么"。人物固定、风格迁移、画质增强、服装控制都靠它,是工作流中最灵活、最常用的辅助模型类型。

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐