探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR

这篇具有很好参考价值的文章主要介绍了探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

(零)前言

本篇主要介绍WEBUI的插件:StableSR:图片超分辨放大的使用,以及和WEB UI附加功能图片放大功能的对比。
更多不断丰富的内容参考:🔗《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》

(一)图片放大

之前通过《探索【Stable-Diffusion WEBUI】的附加功能:图片缩放&抠图》了解到,由于Stable-Diffusion并不适合生成很大的图片,所以我们可以先生成适合的正常尺寸图,再通过附加功能页的放大功能,放大图片。

同时介绍了好些缩放模型,其中有些效果挺好的。

特别是LDSR(潜在扩散超分辨率模型)照片表现非常好,不仅脑补的细节多,还加入了很多噪点显得真实。
但模型体积巨大+速度超级慢。放大一张512x512的图,几乎需要20分钟(其它放大算法都是20秒内……)。

所以,有没有其它放大选择呢?

(二)图片超分辨率放大脚本插件(StableSR)

参考:🔗插件StableSR
可以从WEB UI中直接安装,它是一个图生图的脚本。
安装后会在图生图最下面的脚本下拉框中出现StableSR。

由于官网有中文说明,不需要细讲了吧:)
简单列举下重点,细节请看官网(仓库)的中文说明。

对了:SR = Super-Resolution ,写出来以防忘记。。。

(2.1)下载组件

安装后需要下载模型才能使用(⚠️细节请看官网介绍):

  1. Stable Diffusion V2.1 512 EMA 模型(约 5.21GB)->放基础模型目录。
  2. 官方的 StableSR 模块 (约400MB)->放插件自己的模型目录。
  3. 可选使用官方提供的 VQGAN VAE(约750MB) ->放VAE模型目录。
  4. 可选配合 Tiled Diffusion & VAE 扩展,也就是分区扩散(Multi Diffusion)插件使用。
    说是可选,咱普通显存只能必选,否则稍大的图就显存不够了。

(2.2)使用

基本使用很简单,在图生图下面启用脚本就可以了。
主要步骤如下,官网还给出了具体参数配置的建议(⚠️细节请看官网介绍)。

  • 基础模型选择刚才下载的v2-1_512-ema-pruned模型。
  • 切换到 img2img 标签。在页面底部找到 “脚本” 下拉列表,选择StableSR脚本。
    点击刷新按钮,选刚才下载的 StableSR 模块。
  • 如果生成图像尺寸 > 512,推荐使用 Tiled Diffusion & VAE(也就是Multi Diffusion upscaler)。
  • 上传图像并开始生成。

我试了一下速度还不算太慢(比一般算法慢多了)。
一张512²的图大概5-6分钟吧(还是比LDSR快不少啊)。

💡 不过需要注意:

  • 中低显存下,不能打开Channels Last内存格式优化,否则报错。
  • 不要尝试放大特别小的图片(48x48一类?)😄 。
  • 纹理类可以脑补的细节很不错。但文字类需要“原样放大”的效果很差,看不出原文。
    这种情况请对比4x-UltraSharpR-ESRGAN 4x+等附加功能页图片放大的效果。
  • 使用SD2.1的基础模型时,嵌入式(embeddings)模型可能会暂时看不见,正常的,因为那些是给SD1.5用的。
  • 注意版权问题,目前由于版权协议,生成的图片不能商用。

(2.3)实例对比(放大)

下面这张图(请忽略AI生成导致不合理的部分),我们来把它放大4倍。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR

放大后实在是太大了,就给个局部裁剪吧。
局部:原图直接缩放(传统图像编辑软件,对比组)
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


局部:StableSR
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


局部:StableSR(纯噪声选项开)
纯噪声适合脑补肌肤纹理,植物人群,各种不太需要和原图一致的细节。细节多,显得更加清晰。
但是改变原图较多,不适合文字之类。有时也会生成莫名奇妙的东西。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


局部:LDSR(最强对比组)
噪点多显得真实,但噪点真的太多了。而且没有色彩修复选项(关键是太慢,其它可以忍)。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR

(2.4)实例对比(修复)

下面这张是比较早时自己拍的照片,那时相机不行,即使缩小看也很模糊。
我们不放大它的分辨率,处理看看。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR

局部100%:座机拍的原图
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


局部100%:StableSR
整体清晰了不少,文字,栏杆,树叶等。
不过截图外远处人的样子已经没法看了。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


局部100%:StableSR(纯噪声选项开)
AI生成(脑补)的细节更多,已经明显改变原图了,比如牌匾字体破损的位置,而且整体有点卡通化。
草地上有个蓝色的牌子(虽然看不清写的啥),彻底被弄没了。
探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR


(三)总结

插件非常适合可以脑补细节的图片放大,相对LDSR来说不算太慢。
但操作相对复杂,还需要配合分区扩散插件(不然就爆显存,参数设不对也爆显存)。

总之它给了我们一个新的选择,期待持续改进。文章来源地址https://www.toymoban.com/news/detail-493056.html

到了这里,关于探索【Stable-Diffusion WEBUI】的图片超分辨插件:StableSR的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 探索【Stable-Diffusion WEBUI】的插件:画布扩绘(Outpaint)

    本篇主要提到图生图的扩展使用,也就是画布扩绘(Outpaint),在不改变原画的基础上,扩大画布补充内容。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 我们都知道,图生图当中可以用蒙版修改/去掉图片中某一部分内容,而不改变图片其

    2024年02月06日
    浏览(51)
  • 探索【Stable-Diffusion WEBUI】的插件:界面主题与中文翻译

    本篇主要提到了WEBUI的主题插件,中英对照翻译(多语言)插件。可以帮助我们熟悉界面,提高我们使用的效率。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 某次更新之后,可以选Gradio主题了。 如下图设置最下方,选择不同主题,重启后

    2024年02月04日
    浏览(56)
  • 闲谈【Stable-Diffusion WEBUI】的插件:绘图过程动画输出

    本篇主要提到WEBUI的过程动画输出插件,把AI绘图的过程,从完全噪点到成品的过程做成动画视频。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考:https://github.com/vladmandic/sd-extension-steps-animation 可以从WEB UI中直接安装。 安装后出现在和

    2024年02月16日
    浏览(39)
  • 闲谈【Stable-Diffusion WEBUI】的插件:美不美?交给AI打分

    本篇主要提到了WEBUI的Cafe Aesthetic插件,这是一个相对独立的插件,单独标签页,判断图片艺术感和分类。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 图像作品到底好不好,有没有艺术细菌,AI也可以评价了。 参考:https://github.com/p1atde

    2024年02月09日
    浏览(34)
  • 发现【Stable-Diffusion WEBUI】的插件:不健康内容过滤器

    本篇主要提到了WEBUI的不健康内容过滤插件,它宁可错杀一千也不放过一个。可以有效避免有害内容。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考:https://github.com/AUTOMATIC1111/stable-diffusion-webui-nsfw-censor 可以从WEB UI中直接安装。 安装后

    2024年02月08日
    浏览(35)
  • 关于【Stable-Diffusion WEBUI】生成全身图:插件解决面部崩坏问题

    本篇主要介绍WEBUI的插件:SD Face Editor,虽然叫Editor实际上是Fixer,作用是修复脸部。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考: 由于神经网络无法完全捕捉人脸的微妙细节和变化,导致产生了不自然或扭曲的结果…… 所以生成图

    2024年02月06日
    浏览(43)
  • 闲谈【Stable-Diffusion WEBUI】的插件:模型工具箱:省空间利器

    本篇主要提到WEBUI的一个新插件,模型工具箱,可以修剪模型,提取修改模型组件信息。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考:https://github.com/arenasys/stable-diffusion-webui-model-toolkit 可以从WEB UI中直接安装,它是一个用于管理、编

    2024年02月11日
    浏览(46)
  • 发现【Stable-Diffusion WEBUI】的神奇插件:离线自动翻译中文提示词

    本篇主要提到了WEBUI的提示词翻译插件,之前我说不喜欢联网的插件,而它是离线翻译。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考:https://github.com/ParisNeo/prompt_translator 💡 不用联网 / 离线翻译 😄 它采用的是谷歌语言模型,可以将

    2023年04月27日
    浏览(43)
  • [AI绘图教程]stable-diffusion webui加载模型与插件. 实战AI绘画

    之前讲了stable diffusion webui搭建,这里主要介绍使用方法以及模型,扩展等. 主要下载网址 HuggingFace:Stable Diffusion、ControlNet的官方仓库。 Civitai:里面多是Lora或其它NSFW等模型的仓库。 这里下载anythingV4的模型,在Huggingface网站中搜索, 下载后放在stable-diffusion-webuimodelsStable-diffusio

    2023年04月09日
    浏览(60)
  • 关于Photoshop中的【Stable-Diffusion WEBUI】插件:Auto.Photoshop.SD.plugin

    本篇主要提到Photoshop中的Stable-Diffusion WEBUI插件,相对WEBUI并不算好用,但省得来回切换。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 参考:https://github.com/AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin 不能从WEBUI中直接安装,请选择从url安装吧

    2024年02月07日
    浏览(39)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包