ComfyUI模型加载与管理：高效使用Checkpoint和LoRA

发布日期：2025-05-05 | 作者：白兔AI | 阅读时间：约8分钟

🐰 关注公众号「白兔AI」

扫码关注公众号，获取更多AI绘画教程和提示词

✨ 白兔去水印小程序

免费去水印工具，一键去除图片/视频水印

一、ComfyUI支持的模型类型

ComfyUI支持Stable Diffusion生态中的各类模型，每种模型都有特定的存放位置和使用方式：

• Checkpoint（大模型）：核心生成模型
• LoRA：轻量级微调模型
• VAE：变分自编码器
• ControlNet：条件控制模型
• Upscale：图像放大模型
• Embedding/Textual Inversion：文本嵌入

二、模型目录结构

ComfyUI的模型存放目录如下：

ComfyUI/
├── models/
│   ├── checkpoints/       # 大模型
│   ├── loras/             # LoRA模型
│   ├── vae/               # VAE模型
│   ├── controlnet/        # ControlNet模型
│   ├── upscale_models/    # 放大模型
│   ├── embeddings/        # 文本嵌入
│   ├── clip/              # CLIP模型
│   ├── clip_vision/       # CLIP Vision模型
│   └── style_models/      # 风格模型

三、Checkpoint模型加载

Load Checkpoint节点：

这是每个工作流的起点，加载主生成模型。

• 支持格式：.safetensors、.ckpt
• 输出：MODEL、CLIP、VAE三个端口
• SD 1.5和SDXL模型可以混用不同工作流

模型选择建议：

• 写实风格：RealisticVision、DreamShaper
• 动漫风格：Counterfeit、AnythingV5
• 通用风格：SDXL Base + Refiner

四、LoRA模型使用

Load LoRA节点：

LoRA用于在保持大模型基础上添加特定风格或概念。

• 支持格式：.safetensors
• 可以串联多个LoRA节点
• 通过strength参数控制影响强度

LoRA连接方式：

Load Checkpoint → Load LoRA 1 → Load LoRA 2 → KSampler
                ↓                ↓
              MODEL            MODEL

常用LoRA类型：

• 风格LoRA：模拟特定艺术风格
• 角色LoRA：生成特定角色
• 服装LoRA：控制服装类型
• 姿势LoRA：影响人物姿势

五、VAE模型管理

VAE的作用：

VAE负责在像素空间和潜在空间之间转换图像。

使用方式：

• Checkpoint通常自带VAE
• 可以使用Load VAE节点加载外部VAE
• 常用VAE：vae-ft-mse-840000-ema-pruned

VAE选择建议：

• SD 1.5：使用840000 VAE
• SDXL：使用内置VAE或sdxl_vae
• 遇到颜色问题（如灰度图）时尝试更换VAE

六、ControlNet模型加载

Load ControlNet Model节点：

加载ControlNet条件控制模型。

Apply ControlNet节点：

将ControlNet条件注入采样过程。

常用ControlNet模型：

• control_v11p_sd15_canny：边缘控制
• control_v11f1p_sd15_depth：深度控制
• control_v11p_sd15_openpose：姿势控制
• control_v11p_sd15_lineart：线稿控制

七、模型管理技巧

1. 模型命名规范

使用清晰的命名方式便于识别：

格式：模型名_版本_类型.safetensors

示例：DreamShaper_8_pruned.safetensors

2. 模型分类存放

在loras等目录下创建子文件夹进行分类：

loras/
├── style/          # 风格LoRA
├── character/      # 角色LoRA
├── clothing/       # 服装LoRA
└── concept/        # 概念LoRA

3. 模型信息记录

建立表格记录模型信息：

• 模型名称和用途
• 推荐权重范围
• 触发词（trigger words）
• 适用的大模型

八、模型加载优化

• 使用.safetensors格式（比.ckpt更安全、加载更快）
• 定期清理不用的模型，节省磁盘空间
• 使用模型量化版本降低显存占用
• 启用xformers或sdp注意力优化

九、常见问题

Q: 模型加载很慢？

A: 大模型文件通常4-7GB，首次加载需要时间。使用SSD可以显著提升加载速度。

Q: 模型不显示在列表中？

A: 检查文件是否放在正确的目录，重启ComfyUI刷新列表。

Q: LoRA没有效果？

A: 检查strength是否设置正确，确认使用了正确的触发词。

十、总结

模型是AI绘画的核心资源。在ComfyUI中合理管理和使用各类模型，可以让你的创作更加高效和多样化。建立良好的模型管理习惯，记录模型信息，定期整理优化，将帮助你构建强大的AI绘画素材库。