问小白 wenxiaobai
资讯
历史
科技
环境与自然
成长
游戏
财经
文学与艺术
美食
健康
家居
文化
情感
汽车
三农
军事
旅行
运动
教育
生活
星座命理

ComfyUI工作流搭建指南:从入门到实践

创作时间:
作者:
@小白创作中心

ComfyUI工作流搭建指南:从入门到实践

引用
CSDN
1.
https://blog.csdn.net/matt45m/article/details/136872286

ComfyUI是一个基于图形节点编辑器的AI图像生成工具,通过拖拽各种节点到画布上,连接节点之间的关系,构建从加载模型到生成图像的流程。它支持自定义工作流,可以实现从文本到图像的生成,是AI艺术创作的重要工具之一。

ComfyUI工作流简介

ComfyUI工作流是一个基于图形节点编辑器的工作流程,通过拖拽各种节点到画布上,连接节点之间的关系,构建从加载模型到生成图像的流程。每个节点代表一个与Stable Diffusion相关的模型或功能,节点之间通过连线传递图片信息。

工作流程始于加载模型节点,负责加载预先训练好的Stable Diffusion模型。随后,通过CLIP Text Encode节点对输入的关键词Prompt进行处理,将文本转换为图像描述,并生成初始的Latent Image。接着,进入采样器和VAE解码节点,它们的任务是对初始的Latent Image进行采样、编码和解码,最终生成图像。在采样器节点中,输入的Latent Image会被转换为一系列小块(patches),然后利用VAE模型进行解码,生成图像。最后生成的图像会通过连线传递到下一个节点进行进一步处理或输出。

在ComfyUI中,除了通过填写参数的方式进行参数设置和控制生成过程外,还可以通过观察各节点的状态和数据流运转过程来理解生成式AI模型(Stable Diffusion)的基本原理。

常用工作流网站推荐

OpenArt

OpenArt是一个集云端运行ComfyUI工作流和AI图像创作于一体的平台,提供了强大的AI图像创作功能,还提供了云端运行和可免费下载ComfyUI工作流。但需要注意的是,由于网络原因,国内用户访问可能不太顺畅。

Comfy Workflows

Comfy Workflows上也有很多免费的可用的工作流提供下载,虽然数量可能没有OpenArt多,但优点是可以在国内顺畅访问。

Civitai

Civitai不仅提供了各种模型的下载,还提供了工作流的下载。用户可以在过滤器里选择工作流选项,就可以看到很多可免费下载的工作流。

工作流导入指南

在使用ComfyUI时,可能会遇到工作流导入报错的情况,具体表现为节点变成红色。以下是两种常见的解决方法:

第一种方法:使用管理器安装缺失节点

  1. 打开ComfyUI的管理器
  2. 选择"安装缺失节点"
  3. 全部选择需要安装的节点
  4. 点击安装,等待安装完成
  5. 重启ComfyUI

第二种方法:手动安装源码

对于一些无法通过管理器安装成功的节点,可以采用手动安装源码的方式:

  1. 打开ComfyUI的管理器
  2. 选择"安装缺失节点",但不要点击安装或更新
  3. 点击节点名称旁边的网址链接,跳转到Git源码界面
  4. 下载源码压缩包或使用git clone进行下载
  5. 将下载的源码解压到ComfyUI/custom_nodes目录下
  6. 重启ComfyUI

创建简易文生图工作流

下面是一个简易文生图工作流的创建过程:

  1. 打开ComfyUI,进入工作流编辑界面
  2. 从左侧节点库中拖拽"Load SD Model"节点到画布,用于加载Stable Diffusion模型
  3. 拖拽"CLIP Text Encode"节点,用于处理输入的文本提示词
  4. 拖拽"KSampler"节点,用于对Latent Image进行采样
  5. 拖拽"VAE Decoder"节点,用于将采样后的Latent Image解码为最终图像
  6. 将各个节点按照工作流程连接起来
  7. 在"Load SD Model"节点中选择要使用的模型
  8. 在"CLIP Text Encode"节点中输入文本提示词
  9. 运行工作流,生成图像

通过以上步骤,用户可以创建一个基本的文生图工作流,实现从文本到图像的生成。ComfyUI的灵活性和可扩展性使得用户可以根据需要创建更复杂的工作流,实现更多样化的图像生成效果。

© 2023 北京元石科技有限公司 ◎ 京公网安备 11010802042949号