stable diffusion插件controlnet1.1全面升级,大幅提高出图质量

这篇具有很好参考价值的文章主要介绍了stable diffusion插件controlnet1.1全面升级,大幅提高出图质量。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

哈喽,各位小伙伴们大家好,有一段时间没更新了,最近的AI绘画圈呀,可谓是一天一个黑科技。这不,最近controlnet插件更新了,我也是马上就下载下来用了一下。

好家伙,不用不知道啊,一用吓一跳。废话不多说,直接上才艺,这是我用最新的版本,也就是controlnet1.1版本使用lineart功能使用少量tag生成的图片,可以说是一目了然啊

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

 stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

当然了,我是批量跑图的,因为我的显卡并不是很好,所以只能批量跑图,然后选其中质量最好的,然后进行二次加工。下面是我使用到的tag词以及批量跑图的结果,也列出来给大家做一个参考。

tag

prompt:
	1girl, grey hair, red eyes, put your hand on your chest,Wearing golden earrings,Wearing a black evening gown,smile, 
	4k,masterpiece, best quality, white background, 
negative prompt:
	low quality, water, logo, worst quality:2,Redundant fingers

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

批量跑图预览:

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

        其实可以看出,我们使用低tag跑出来的图片质量已经算是可以的了。

        如果有绘画功底的朋友,可以直接ps,sai修改,没有绘画功底的朋友也可以尝试使用SD里面的局部重绘功能,当然我个人觉得那个功能不是很好用,最好还是手动修改最好

        好了,看完效果,肯定有朋友会问了,那么在哪里可以下载呢?

        首先,这里要跟大家提一下秋叶大佬啊,咱们玩赛博绘画的,必须给秋叶大佬磕一个,我现在使用的SD是秋叶大佬整合的一键启动版,非常适合新手小白。

        好了,下面就让我带大家看看这次的controlnet1.1都更新了哪些内容吧。

更加规范的命名 

  • control_v11p_sd15_canny.pth

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  •  v11:表示的是当前controlnet的版本号,1.1版本。而其他的例如f,表示的是修正版,

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

 例如:v11f1就表示为1.1版本的第一个修复版

  • p:质量标识符,p表示该模型可以用于生产环境产出,e表示实验性的,可能会不稳定,u表示未完成。
  • SD:这个我就不好解释了,直接看图吧,相信有比我更懂的朋友,也可以在评论区下面科普一下。
  • canny:直译是控制方法,通俗来讲,就是不同功能的模型,这个在往期的文章中也有讲到,不懂的朋友可以自行翻阅一下之前讲controlnet的文章。

更科学合理的界面

  • 取消了反色模式在界面上的展示,将反色模式加入到了预处理器中,名为invent也就是反色。如下图所示

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 新增了一个完美像素模式,用来优化一些controlnet处理时候的分辨率问题。

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 预览,改为了一个图标,点击之后可以预览controlnet处理后的结果。

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 新增了控制模式

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

三个选项分别是均衡/提示词更重要/controlnet更重要(猜测模式),下面是不同选择controlnet处理的结果,(ps:这里的参考图应该是选择了欧美风模型,我用final模型+ DPM++ 2M的采样方法跑了一组,风格都是二次元类型的。)

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 对canny、openpose、depth等常用模型进行了优化升级,提升了画面表现力

  • HED预处理器改为了softedge,并且增加了几个分支

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

 stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 更加强大的openpose,这次openpose,解决了识别不到手部的功能,并且支持识别脸部表情

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

 stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 新增了leres++ zoe,拥有比depth更好的深度图效果

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

  • 更加强大的线稿上色功能!这也是我文章开头中的一个效果使用了lineart

stable diffusion插件controlnet1.1全面升级,大幅提高出图质量,AI作画

预处理使用invent(反色)可以提取到精度很高的线稿细节。

好了,以上就是本期文章的全部内容了,主要是我也只琢磨了这些东西,后期有其他的发现也会第一时间分享给大家的。文章来源地址https://www.toymoban.com/news/detail-601541.html

到了这里,关于stable diffusion插件controlnet1.1全面升级,大幅提高出图质量的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • stable-diffusion安装controlnet插件

    1)extensions → install from URL → install 然后填入:https://github.com/Mikubill/sd-webui-controlnet 2)installed → apply and restart UI 下载controlnet模型(50G左右)到 E:stable-diffusion-webuiextensionssd-webui-controlnetmodels 目录下: lllyasviel/ControlNet at main 把所有8个模型放到models文件夹下 (待续)

    2024年02月12日
    浏览(51)
  • Stable Diffusion ControlNet 插件预览错误解决方案

            在使用 Stable Diffusion ControlNet 插件 时,进行预处理时报错,网络上暂无详细的解决方案,故写此文。 本人软件版本: 秋叶大佬整合包v4.6.1 ControlNet v1.1 Wei UI v1.6          如图所示,在放入强尼银手(bushi)的图片后,使用ControlNet进行预处理时报错,猜测是由

    2024年04月16日
    浏览(36)
  • stable diffusion插件controlnet的详细讲解以及用法说明

    controlnet是基于只能绘画AI-stable diffusion推出的一款功能强大的插件,它为文生图功能引入了新的控制方式,可以额外控制人物的具体姿势,景深,线稿上色等等,可以更稳定的控制画面。 插件安装 在stable diffusionUI界面中找到扩展   在扩展中找到从网址安装   当出现如下提示

    2024年01月19日
    浏览(40)
  • 万字长文解读Stable Diffusion的核心插件—ControlNet

    目录 一、介绍 二、使用方法 三、ControlNet结构 1.整体结构 2.ControlLDM 3.Timestep Embedding 4.HintBlock 5.ResBlock 6.SpatialTransformer 7.SD Encoder Block 8.SD Decoder Block 9.ControlNet Encoder Block 10.Stable Diffusion 四、训练 1.准备数据集 2.生成ControlNet模型 3.执行训练 五、其它 1.损失函数 2.随机替换提示

    2023年04月14日
    浏览(49)
  • Stable Diffusion - 图像控制插件 ControlNet (OpenPose) 配置与使用

    欢迎关注我的CSDN:https://spike.blog.csdn.net/ 本文地址:https://spike.blog.csdn.net/article/details/131591887 论文:Adding Conditional Control to Text-to-Image Diffusion Models ControlNet 是神经网络结构,用于控制预训练的大型扩散模型,以支持额外的输入条件。ControlNet 以端到端的方式学习任务特定的条

    2024年02月13日
    浏览(40)
  • 探索【Stable-Diffusion WEBUI】的插件:ControlNet 1.1

    本篇主要提到ControlNet新版本的使用,和旧版本的变化,并偷懒参考了别人很不错的文章。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 WEBUI的插件里, ControlNet 是少数几个不需要翻译的插件,因为翻译了也没意思: 控制网络 ? 它的作用是

    2024年02月09日
    浏览(60)
  • AI绘图软件Stable Diffusion 安装和使用之二controlnet插件

    本期说一下Stable Diffusion非常有名的插件controlnet。同上一篇一样,我们安装b站大佬秋葉aaaki(有的网友戏称他/她是赛博佛祖)的stable diffusion4.2整合包。解压缩以后,打开启动器,见下图,界面比早期版本更好看了。 ​编辑​ 启动器打开以后,安装controlnet插件 填写网址:h

    2024年02月04日
    浏览(151)
  • Stable Diffuse AI 绘画 之 ControlNet 插件及其对应模型的下载安装

    目录 Stable Diffuse AI 绘画 之 ControlNet 插件及其对应模型的下载安装 一、简单介绍 二、ControlNet 插件下载安装 三、ControlNet 插件模型下载安装 四、ControlNet 插件其他的下载安装方式 五、ControlNet 插件模型名称说明 Stable Diffusion是一个文本到图像的潜在扩散模型,由CompVis、Stabil

    2024年02月08日
    浏览(49)
  • Stable Diffusion WebUI 控制网络 ControlNet 插件实现精准控图-详细教程

    本文收录于《AI绘画从入门到精通》专栏,专栏总目录:点这里,订阅后可阅读专栏内所有文章。 大家好,我是水滴~~ 本文主要介绍 Stable Diffusion WebUI 一个比较重要的插件 ControlNet(控制网络),主要内容有:ControlNet 的工作原理、如果安装 ControlNet 插件、如何使用 ControlNet

    2024年04月25日
    浏览(44)
  • Stable Diffusion - ControlNet 插件中扩展局部重绘 InpaintOnly + LaMa 算法与应用

    欢迎关注我的CSDN:https://spike.blog.csdn.net/ 本文地址:https://spike.blog.csdn.net/article/details/131643131 LaMa: https://github.com/advimman/lama Paper: Resolution-robust Large Mask Inpainting with Fourier Convolutions LaMa: Large Mask inpainting 尽管现代图像修复系统已经取得了显著的进步,但是在处理大面积缺失、复

    2024年02月16日
    浏览(44)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包