SD文生图:高清修复的功能详解
创作时间:
作者:
@小白创作中心
SD文生图:高清修复的功能详解
引用
CSDN
1.
https://blog.csdn.net/weixin_53908101/article/details/139484535
高清修复是AI图像生成领域的重要技术,它能让生成的图像更加清晰细腻,适合用作高清壁纸等场景。本文将详细介绍高清修复的功能和使用方法,帮助读者更好地利用这一技术。
基础知识
图像的高清修复是一种图像处理技术,旨在从低质量或受损的图像中恢复或生成高质量的图像。高清修复利用多种技术和算法来提升图像的分辨率、细节和视觉效果,使其看起来更加清晰和细腻。以下是高清修复的一些关键概念和方法:
关键概念
- 超分辨率(Super-Resolution):通过算法将低分辨率图像转换为高分辨率图像。常用方法包括单图像超分辨率(Single Image Super-Resolution, SISR)和多帧超分辨率(Multi-Frame Super-Resolution, MFSR)。
- 降噪(Denoising):去除图像中的噪声,使图像更加清晰。这涉及从图像中去除随机或系统性噪声,同时保留重要的细节。
- 去模糊(Deblurring):消除图像中的模糊,使细节更加清晰。模糊可能是由于相机抖动、对焦不准或运动等原因造成的。
- 细节增强(Detail Enhancement):增强图像中的细节,使其更加鲜明。这可以通过对比度调整、锐化等技术实现。
常用技术和方法
- 卷积神经网络(CNN):深度学习模型,如SRCNN(Super-Resolution Convolutional Neural Network)和ESRGAN(Enhanced Super-Resolution Generative Adversarial Network),在图像超分辨率任务中表现优异。这些模型通过大规模训练数据学习低分辨率到高分辨率图像的映射。
- 生成对抗网络(GAN):GANs,如SRGAN(Super-Resolution GAN)和ESRGAN,利用生成器和判别器之间的对抗训练,提高图像的细节和逼真度。生成器生成高清图像,判别器评估图像的真实性,从而推动生成更高质量的图像。
- 自回归和自注意力模型:自回归模型(如PixelCNN)和自注意力模型(如Transformers)也用于图像高清修复,尤其在处理复杂图像结构和长程依赖时表现良好。
- 传统方法:传统的图像处理方法,如双三次插值(Bicubic Interpolation)、Lanczos插值等,也用于图像超分辨率,但效果通常不如深度学习方法。
高清修复方法
为了提高绘画产出图像质量,专门提供了几个功能用于修复图像的方法:
- 文生图: Hires.fix
- 图生图: 放大分辨率
- 任意图: 附加功能
- 扩展插件:MultiDiffusion
使用Hires.fix方法
這個看英文全稱應該就是 High Resolution.Fix的意思。
其实放大算法和采样算法一样,没有绝对的好坏,出来的效果其实都差不多,你需要自己去试。但是网上流传着一个说法是:无脑选择 R-ESRGAN 4x+ 算法就好,如果是二次元就选择 R-ESRGAN 4x+ Anime6B。
- Hires step表示在进行高清修复过程中计算的步数。它直接影响到最终修复效果的好坏。一般来说,步数越多,修复结果越精确,但是相应地计算时间也会增加。用户可以根据实际需求和计算资源的限制来进行合理的设置。
- Denoising strength,即降噪强度,是一个重要的参数,它反映了最终生成图像与原始输入图像之间的变化程度。该值的大小直接影响到放大后图像与放大前图像的差别。当降噪强度较高时,修复后的图像将与原图几乎无关;而降噪强度较低时,修复后的图像会与原图有一定的相关性。一般来说,阈值在0.7左右时,修复后的图像与原图基本上无关;而0.3以下的阈值则表示修复后的图像相比原图有轻微改动。在实际执行中,计算步骤为Denoising strength乘以Sampling Steps。
如果细心观察它的生成过程,你会发现在进度条 50% 左右的时候, SD 是先绘制了一幅低分辨率的图像,然后在此基础上重绘高清的图像,其实很像图生图。
下圖中我們生成512的圖片,放大2倍。到1024 . 效果不錯。嘗試放大4倍,由於GPU顯存問題,失敗。
使用插件MultiDiffusion
請注意,新舊版本的內容顯示,可能會不一樣。
如果去掉Enable Tiled Diffusion ,則同樣的關鍵字生成的圖像是
总结
总体来看,高清放大有很多种方法,并且相信会有更多的插件,在这方面努力。除非特殊的需要,一般我们2K,4K的清晰程度应该就够用了。 越大的清晰度和尺寸,针对GPU显存的要求就越高。
热门推荐
婚后夫妻强制同姓,将来日本人都叫“佐藤”?
白头拔一根长十根?专家:没有科学依据|网红说法求真
古代社会对戏子偏见的根源探究
电解铝干什么电解铝的用途是什么?电解铝的生产过程是怎样的?
物业管理的重要性与未来发展:提升生活质量的关键角色
揭秘彝族神秘宗教仪式:从“接密枯”到五色观念
彝族禁忌:守护社会秩序的文化密码
深圳地铁直达!莲花山公园打卡攻略
深圳地铁打卡:中英街&香蜜公园
红豆燕麦饭,糖尿病患者的理想主食选择
解锁情绪密码:运动,你的秘密情绪解压神器!
夏日清凉:无刀切西瓜妙招大揭秘!
秋冬季节卫生间除臭全攻略:从硬件改造到日常维护
殷墟箭簇之谜:平头箭簇背后的古代狩猎智慧
克特姆卡洞穴岩画:旧石器时代人类的狩猎智慧与艺术创造
从狩猎工具到文明基石:解读人类祖先的生存智慧
高情商应对:如何优雅拒绝聚餐邀请?
高情商教你优雅拒绝职场饭局
掌握指南针使用技巧,探索户外活动中的方向指引与实用价值
探索古代导航技术:司南的起源与发展
零售业与数字化的深度融合:重塑消费体验与商业未来
如何优化毕业生简历以提高求职成功率?
不要去找工作,让工作来找你
減肥必看!10種純天然「吸脂肪食物」刮油燃脂、越吃越瘦,體重停滯期最推薦
这种粗粮产品冲泡就能吃,升糖还慢,你可能没吃过……
如何培养孩子的「自主学习」能力?6大关键策略!
周宏春:土壤重金属污染治理新思路
食品安全宣传周:土壤重金属污染知多少?
“老四的快乐生活”:东北话短视频爆红背后的故事
从零到精通:朋友圈运营实用指南