SD文生图:高清修复的功能详解
创作时间:
作者:
@小白创作中心
SD文生图:高清修复的功能详解
引用
CSDN
1.
https://blog.csdn.net/weixin_53908101/article/details/139484535
高清修复是AI图像生成领域的重要技术,它能让生成的图像更加清晰细腻,适合用作高清壁纸等场景。本文将详细介绍高清修复的功能和使用方法,帮助读者更好地利用这一技术。
基础知识
图像的高清修复是一种图像处理技术,旨在从低质量或受损的图像中恢复或生成高质量的图像。高清修复利用多种技术和算法来提升图像的分辨率、细节和视觉效果,使其看起来更加清晰和细腻。以下是高清修复的一些关键概念和方法:
关键概念
- 超分辨率(Super-Resolution):通过算法将低分辨率图像转换为高分辨率图像。常用方法包括单图像超分辨率(Single Image Super-Resolution, SISR)和多帧超分辨率(Multi-Frame Super-Resolution, MFSR)。
- 降噪(Denoising):去除图像中的噪声,使图像更加清晰。这涉及从图像中去除随机或系统性噪声,同时保留重要的细节。
- 去模糊(Deblurring):消除图像中的模糊,使细节更加清晰。模糊可能是由于相机抖动、对焦不准或运动等原因造成的。
- 细节增强(Detail Enhancement):增强图像中的细节,使其更加鲜明。这可以通过对比度调整、锐化等技术实现。
常用技术和方法
- 卷积神经网络(CNN):深度学习模型,如SRCNN(Super-Resolution Convolutional Neural Network)和ESRGAN(Enhanced Super-Resolution Generative Adversarial Network),在图像超分辨率任务中表现优异。这些模型通过大规模训练数据学习低分辨率到高分辨率图像的映射。
- 生成对抗网络(GAN):GANs,如SRGAN(Super-Resolution GAN)和ESRGAN,利用生成器和判别器之间的对抗训练,提高图像的细节和逼真度。生成器生成高清图像,判别器评估图像的真实性,从而推动生成更高质量的图像。
- 自回归和自注意力模型:自回归模型(如PixelCNN)和自注意力模型(如Transformers)也用于图像高清修复,尤其在处理复杂图像结构和长程依赖时表现良好。
- 传统方法:传统的图像处理方法,如双三次插值(Bicubic Interpolation)、Lanczos插值等,也用于图像超分辨率,但效果通常不如深度学习方法。
高清修复方法
为了提高绘画产出图像质量,专门提供了几个功能用于修复图像的方法:
- 文生图: Hires.fix
- 图生图: 放大分辨率
- 任意图: 附加功能
- 扩展插件:MultiDiffusion
使用Hires.fix方法
這個看英文全稱應該就是 High Resolution.Fix的意思。
其实放大算法和采样算法一样,没有绝对的好坏,出来的效果其实都差不多,你需要自己去试。但是网上流传着一个说法是:无脑选择 R-ESRGAN 4x+ 算法就好,如果是二次元就选择 R-ESRGAN 4x+ Anime6B。
- Hires step表示在进行高清修复过程中计算的步数。它直接影响到最终修复效果的好坏。一般来说,步数越多,修复结果越精确,但是相应地计算时间也会增加。用户可以根据实际需求和计算资源的限制来进行合理的设置。
- Denoising strength,即降噪强度,是一个重要的参数,它反映了最终生成图像与原始输入图像之间的变化程度。该值的大小直接影响到放大后图像与放大前图像的差别。当降噪强度较高时,修复后的图像将与原图几乎无关;而降噪强度较低时,修复后的图像会与原图有一定的相关性。一般来说,阈值在0.7左右时,修复后的图像与原图基本上无关;而0.3以下的阈值则表示修复后的图像相比原图有轻微改动。在实际执行中,计算步骤为Denoising strength乘以Sampling Steps。
如果细心观察它的生成过程,你会发现在进度条 50% 左右的时候, SD 是先绘制了一幅低分辨率的图像,然后在此基础上重绘高清的图像,其实很像图生图。
下圖中我們生成512的圖片,放大2倍。到1024 . 效果不錯。嘗試放大4倍,由於GPU顯存問題,失敗。
使用插件MultiDiffusion
請注意,新舊版本的內容顯示,可能會不一樣。
如果去掉Enable Tiled Diffusion ,則同樣的關鍵字生成的圖像是
总结
总体来看,高清放大有很多种方法,并且相信会有更多的插件,在这方面努力。除非特殊的需要,一般我们2K,4K的清晰程度应该就够用了。 越大的清晰度和尺寸,针对GPU显存的要求就越高。
热门推荐
《人类政治发展史-168》德国宗教改革和农民战争(下)
车载活性炭放在什么位置好?
盘点30款PC上最好玩的双人同屏游戏
如何评估金融投资的风险和收益?这些评估方法如何影响你的投资决策?
等厚干涉原理与MATLAB演示:劈尖等厚干涉及检测缺陷、牛顿环及液体折射率测量
“诡辩式父母”,更容易养出精神病?
3分钟学会看舌象,提前预知身体健康状况
古罗马的多神教与基督教兴起:信仰变迁的历史轨迹
西湖醋鱼,换鱼了
亚洲各国推动婚权平权最新动向
【避坑指南】如何确保你买到的显卡是全新的而非矿卡?
如何调整过度考试焦虑的状态
如何深入理解市场波动对企业的影响?这种影响在不同行业中有何体现?
关东煮的食材有哪些
韧带断裂手术后怎么康复训练?一文了解
溥仪晚年时,为何拒绝清朝最美格格王敏彤,却选择二婚的李淑贤?
中国古代王恭叛乱的全面解析
探寻印第安人起源:殷商与美洲的神秘联系
便秘神器?西梅汁饮料,为何喝完会腹泻
舰娘游戏好玩合集 有哪些舰娘游戏推荐2025
短线交易战术篇:盘中追涨买入法
全球畅销之谜:揭秘韩国烧酒Soju(真露)的风靡之道!
最新全球消费级AI应用排名:中国公司深度求索、阿里、美图上榜
智商碾压!这10部电影上演高智商互斗,全程无尿点!
事业单位职工探亲假申请指南
《我在长征路上开超市》:当主旋律遇见奇幻,擦出怎样的火花?
墙面石材湿贴施工工艺及找平层水泥砂浆配合比详解
RBAC 模型的简单实现
揭秘Fabric交易流程:一文带你深入了解
如何修复鼻翼四周的小痘痘