问小白 wenxiaobai
资讯
历史
科技
环境与自然
成长
游戏
财经
文学与艺术
美食
健康
家居
文化
情感
汽车
三农
军事
旅行
运动
教育
生活
星座命理

Stable Diffusion图生图详解:原理、流程与应用场景全攻略

创作时间:
作者:
@小白创作中心

Stable Diffusion图生图详解:原理、流程与应用场景全攻略

引用
CSDN
1.
https://m.blog.csdn.net/misdirection_xg/article/details/145702319

Stable Diffusion是目前最流行的AI绘画工具之一,其图生图功能可以让用户基于现有图片生成新的艺术作品。本文将详细介绍Stable Diffusion的图生图原理、操作流程、随机种子的应用以及实际应用场景,帮助读者快速掌握这一实用技能。

图生图原理

在AI绘画中,“文生图”虽然可以通过文字描述生成图像,但其结果往往具有较大的随机性,难以精确控制。相比之下,“图生图”(也称为“垫图”)则允许用户通过上传参考图片来指导AI生成更符合预期的作品。

在现实生活中,当我们需要向设计师传达设计需求时,通常会提供一张风格相近的图片作为参考。在AI绘画中也是如此,“图生图”可以让AI从原图中获取更多信息,在“加噪”和“去噪”的过程中保留原图的特征,从而生成更符合用户需求的图像。

图生图流程介绍

在Stable Diffusion中进行图生图主要分为三个步骤:导入图片、书写提示词、调整参数。

第一步:导入图片

打开Stable Diffusion WebUI,找到“图生图”操作界面。与“文生图”相比,图生图界面多了一个“上传图片”的功能。将准备好的图片上传到指定位置。

第二步:书写提示词

“图生图”的提示词书写逻辑与“文生图”相似,但需要更准确地描述图片特征。例如,可以尝试描述图片的主题、风格、元素等。

第三步:参数调整

图生图的参数设置与文生图类似,但有一些特有的参数,如“重绘幅度”。建议将“重绘幅度”设置在0.6~0.8之间,其他参数可以根据需要进行调整。

  • 采样方法:DPM++ SDE Karras
  • 提示词引导系数:8
  • 迭代步数:20
  • 图片分辨率:建议与原图保持一致,例如800*800

完成参数设置后,点击生成按钮,即可得到初步的图生图结果。为了获得更好的效果,还可以对提示词、重绘幅度和分辨率进行优化。

随机种子的应用

AI生成图像的过程具有随机性,每次生成都会产生不同的结果。为了解决这个问题,Stable Diffusion引入了“随机种子”(Seed)的概念。随机种子是一组随机数,用于控制图像生成过程中的随机性。通过固定随机种子,可以确保每次生成的结果保持一致。

在Stable Diffusion中,可以通过以下方式使用随机种子:

  • 自动生成新种子:点击🎲按钮将随机种子设置为-1
  • 重用上一次种子:点击循环按钮
  • 手动输入种子:从图库中复制上次生成的随机种子并输入

通过固定随机种子,可以确保在调整提示词或其他参数时,图像的基本结构保持不变,从而更容易实现预期效果。

图生图应用场景

图生图功能在多个场景中都有广泛应用:

场景一:原图二次加工

场景二:非人像图片变人物形象


场景三:草稿图补全

除了上述场景,图生图功能还可以应用于更多创意领域,例如风格转换、细节增强等。通过不断实践和探索,可以发现更多有趣的使用方式。

© 2023 北京元石科技有限公司 ◎ 京公网安备 11010802042949号