Stable Diffusion进阶教程：如何实现图片线稿上色

Stable Diffusion进阶教程：如何实现图片线稿上色

引用

CSDN

1.

https://m.blog.csdn.net/m0_58477260/article/details/145827030

图片的线稿上色是指在黑白的线条草图或轮廓图上添加颜色。可以通过传统的手绘方式或者数字绘画软件来完成。今天我们就分享一下如何通过Stable Diffusion实现图片的线稿上色。

原理与效果展示

原图片

二次元模型上色图片

写实模型上色图片

具体实现步骤

第一步：黑白线稿图片的生成

这里介绍2种生成黑白线稿图片的方法。

方法1：使用Midjourney生成。这里附上咒语，可以稳定生成黑白线稿图片。

A beautiful and cute princess, wearing princess dress, full body, line draft,
stick figures, changes in line thickness, black and white
color matching, line art, minimalist, flat illustration --niji 5 --s 250

生成图片效果如下：

方法2：使用动漫AnimeLineart LORA

该LORA模型的介绍可以参照：https://civitai.com/models/16014?modelVersionId=28907

正向提示词：

masterpiece, best quality, a beautiful and cute princess, full body,
clean white background, lineart, monochrome,

反向提示词：

EasyNegative, badhandv4

大模型：Anything V4.5
VAE：Orangemix
采样器：DPM++ 2M Karras
采样迭代步数：20

生成图片的效果如下：

第二步：ControlNet参数设置

• 预处理器：选择invert
• 模型：control_xxx_lineart
• 相关说明：lineart模型（5种预处理器）以及canny模型这类线条模型都可以实现的，大家可以多尝试体验一下。

第三步：提示词的编写以及文生图相关参数设置

这里提示词可以只写图片中包含的元素以及图片质量的相关提示词即可。

提示词：

A beautiful and cute princess, wearing princess dress, full body,

文生图相关参数设置

• 采样器：DPM++2M Karras
• 采样迭代步数：30
• 图片宽高：保持和上传的图片宽高一致或者定比例的放大或者缩小。

第四步：大模型的选择以及图片的生成

不同的大模型生成的图片效果还是有差异的。这里我们选择不同的大模型来看一下效果。

原图

大模型：Anything v5 Prt

大模型：Anything v5 Prt下ControlNet使用canny模型

大模型：Counterfeit V3.0

大模型：CetusMix Coda2

大模型：墨幽人造人

大模型：chilloutmix