SD文生图:高清修复的功能详解
创作时间:
作者:
@小白创作中心
SD文生图:高清修复的功能详解
引用
CSDN
1.
https://blog.csdn.net/weixin_53908101/article/details/139484535
高清修复是AI图像生成领域的重要技术,它能让生成的图像更加清晰细腻,适合用作高清壁纸等场景。本文将详细介绍高清修复的功能和使用方法,帮助读者更好地利用这一技术。
基础知识
图像的高清修复是一种图像处理技术,旨在从低质量或受损的图像中恢复或生成高质量的图像。高清修复利用多种技术和算法来提升图像的分辨率、细节和视觉效果,使其看起来更加清晰和细腻。以下是高清修复的一些关键概念和方法:
关键概念
- 超分辨率(Super-Resolution):通过算法将低分辨率图像转换为高分辨率图像。常用方法包括单图像超分辨率(Single Image Super-Resolution, SISR)和多帧超分辨率(Multi-Frame Super-Resolution, MFSR)。
- 降噪(Denoising):去除图像中的噪声,使图像更加清晰。这涉及从图像中去除随机或系统性噪声,同时保留重要的细节。
- 去模糊(Deblurring):消除图像中的模糊,使细节更加清晰。模糊可能是由于相机抖动、对焦不准或运动等原因造成的。
- 细节增强(Detail Enhancement):增强图像中的细节,使其更加鲜明。这可以通过对比度调整、锐化等技术实现。
常用技术和方法
- 卷积神经网络(CNN):深度学习模型,如SRCNN(Super-Resolution Convolutional Neural Network)和ESRGAN(Enhanced Super-Resolution Generative Adversarial Network),在图像超分辨率任务中表现优异。这些模型通过大规模训练数据学习低分辨率到高分辨率图像的映射。
- 生成对抗网络(GAN):GANs,如SRGAN(Super-Resolution GAN)和ESRGAN,利用生成器和判别器之间的对抗训练,提高图像的细节和逼真度。生成器生成高清图像,判别器评估图像的真实性,从而推动生成更高质量的图像。
- 自回归和自注意力模型:自回归模型(如PixelCNN)和自注意力模型(如Transformers)也用于图像高清修复,尤其在处理复杂图像结构和长程依赖时表现良好。
- 传统方法:传统的图像处理方法,如双三次插值(Bicubic Interpolation)、Lanczos插值等,也用于图像超分辨率,但效果通常不如深度学习方法。
高清修复方法
为了提高绘画产出图像质量,专门提供了几个功能用于修复图像的方法:
- 文生图: Hires.fix
- 图生图: 放大分辨率
- 任意图: 附加功能
- 扩展插件:MultiDiffusion
使用Hires.fix方法
這個看英文全稱應該就是 High Resolution.Fix的意思。
其实放大算法和采样算法一样,没有绝对的好坏,出来的效果其实都差不多,你需要自己去试。但是网上流传着一个说法是:无脑选择 R-ESRGAN 4x+ 算法就好,如果是二次元就选择 R-ESRGAN 4x+ Anime6B。
- Hires step表示在进行高清修复过程中计算的步数。它直接影响到最终修复效果的好坏。一般来说,步数越多,修复结果越精确,但是相应地计算时间也会增加。用户可以根据实际需求和计算资源的限制来进行合理的设置。
- Denoising strength,即降噪强度,是一个重要的参数,它反映了最终生成图像与原始输入图像之间的变化程度。该值的大小直接影响到放大后图像与放大前图像的差别。当降噪强度较高时,修复后的图像将与原图几乎无关;而降噪强度较低时,修复后的图像会与原图有一定的相关性。一般来说,阈值在0.7左右时,修复后的图像与原图基本上无关;而0.3以下的阈值则表示修复后的图像相比原图有轻微改动。在实际执行中,计算步骤为Denoising strength乘以Sampling Steps。
如果细心观察它的生成过程,你会发现在进度条 50% 左右的时候, SD 是先绘制了一幅低分辨率的图像,然后在此基础上重绘高清的图像,其实很像图生图。
下圖中我們生成512的圖片,放大2倍。到1024 . 效果不錯。嘗試放大4倍,由於GPU顯存問題,失敗。
使用插件MultiDiffusion
請注意,新舊版本的內容顯示,可能會不一樣。
如果去掉Enable Tiled Diffusion ,則同樣的關鍵字生成的圖像是
总结
总体来看,高清放大有很多种方法,并且相信会有更多的插件,在这方面努力。除非特殊的需要,一般我们2K,4K的清晰程度应该就够用了。 越大的清晰度和尺寸,针对GPU显存的要求就越高。
热门推荐
国际货运代理在应对国际贸易摩擦中的策略
一条公交看遍崂山秋色,620路沿线景点攻略
皮肤瘙痒的十大原因 - 瘙痒的可能原因
现代恋爱观:在独立与依赖间寻找平衡
专家解析冰箱异味成因及5种天然除臭方案
足底筋膜炎怎么办?医生详解治疗方案和康复运动
早点走,慢慢开!高速公路遇事故务必牢记这几点
灵芝孢子粉质量检测:7大指标保障安全与功效
科学喂养狗狗:狗粮、罐头、零食的选购与搭配指南
埋弧焊电流调节技巧全解析:从基础到实战
春节吃包子:从春秋传承至今的团圆味道
快消品商标维权必读:举证责任与证据搜集指南
高速公路安全行车指南
刘德华2024演唱会,你最期待哪首歌?
牛奶富含五种关键营养,科学饮用助力骨骼健康
刘德华2024内地巡回演唱会抢票攻略:8城开唱,这些要点请收好!
北京机场交通指南:从首都机场和大兴机场到市区的省钱攻略
利伐沙班片服用指南:饭后服用更安全,注意出血症状
芹菜和茼蒿竟是脑梗“隐形杀手”?
利伐沙班片服用指南:10mg随时服,15/20mg需与餐同服,漏服这样处理
小苏打除冰箱异味原理揭秘:不是吸收是中和
灯具厂副总如何玩转企业运营?
饭后来一段,解锁全新休闲模式
黑木耳泡发超8小时有风险,专家建议这样食用最安全
十个月宝宝喝纯牛奶:五大禁忌与选购指南
礼记内则:传统家庭伦理如何指导现代家庭生活
从社会心理学看恋爱独立性:5个实用建议助你保持自我
如何保护嗓子
重磅推荐!数学竞赛精选书单出炉
心理成长助你应对挑战,自我实现让人生更精彩