进阶--AI绘画里你必须要直到的controlnet模型使用方法

这篇具有很好参考价值的文章主要介绍了进阶--AI绘画里你必须要直到的controlnet模型使用方法。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

前言

哈喽,各位小伙伴们大家好,有一段时间没有更新了,最近也是忙着搬家忙着置办家具等等,今天终于得空,于是乎连忙抽空做了这期关于controlnet的使用教程。

因为最近我也是发现,controlnet对于AI绘画来说可真是太重要了,说白了,这个插件用好了,将会大大的提升我们的生产效率,因为它可以做到对线稿的上色以及照片转二次元人物等等功能,这些应用场景就非常广泛了。

好了,废话不多说,直接上干货。

一、contronet的运行模式

我们知道controlnet在下载好了之后分为了两部分的内容,一个是预处理器模型,另一个是controlnet模型。我们在实际使用当中,一般都是会在网上寻找姿势参考图,或者场景参考图等等,所以根据实际使用情况的不同,我在这里将他们分为了需要预处理和不需要预处理两种情况。

  • 需要预处理

    当我们存在需要依托一些参考图片来引导AI生产出符合我们需求的图片时,我们要先分析我们给controlnet的参考。

    用一张图来表示

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

  • 举个例子:

    我这里有一张人物图像,当然背景是比较单一的,能够有清晰的轮廓线,这个时候我们可以选择canny,hed以及openpose等等来进行预处理,再通过我们的正反提示,就可以生产出一副非常不错的图片了。

    进阶--AI绘画里你必须要直到的controlnet模型使用方法

进阶--AI绘画里你必须要直到的controlnet模型使用方法  

  • 不需要预处理

    随着SD的快速发展,市面上以及出现了许多用来提高生产力的插件了,像比较热门的poseX,就可以很好的用来摆出自己喜欢的骨骼模型,这种情况就是不需要预处理的。

    • 操作

      方法也很简单,在扩展-可用-加载自,找到3D openpose并下载安装,安装完成后,在已安装-应用并重启用户界面,即可

进阶--AI绘画里你必须要直到的controlnet模型使用方法

进阶--AI绘画里你必须要直到的controlnet模型使用方法 

进阶--AI绘画里你必须要直到的controlnet模型使用方法 

controlnet模型的应用场景

简单来说呢,这些这么多的模型到底该什么时候用呢,我用下面一张图来解释

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

上述8个模型,可以简单的分为4大类

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

我们将线稿类从精细程度高到低,依次排列。其中

  • canny

    canny模型处理图像最为细致,处理后图片边缘线几乎不变,特别适合图片的局部改色精细线稿的上色

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

  • hed

    hed模型,边缘线检测就没有那么精细,相比canny Ai自由发挥的程度会高一些

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

  • scribble模型和fake_scribble模型

    就比上两种显得粗糙了很多,适合一些手稿的上色和更高的AI自由度发挥

进阶--AI绘画里你必须要直到的controlnet模型使用方法 

  • mlsd

    适合直线检测,多用于建筑或者室内设计等

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

  • depth&normal

    在深度模型中有透视人物多就选择depth模型背景简单单个主体人物突出就用normal模型

进阶--AI绘画里你必须要直到的controlnet模型使用方法

  • opnepose&seg

而Openpost和SEG模型,在骨骼识别和色块分区方面也有著出色的表现,特别是SEG模型还可以用于AI动画模型的稳定性控制中哦

进阶--AI绘画里你必须要直到的controlnet模型使用方法

 

好啦,以上就是本期SD绘画的controlnet教程,制作不易,觉得对你用所帮助的话还请多多一键三连!文章来源地址https://www.toymoban.com/news/detail-441182.html

到了这里,关于进阶--AI绘画里你必须要直到的controlnet模型使用方法的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • AI绘画stablediffusion comfyui SDXL Controlnet模型终于全了 tile来了

    以前一直在直播中吐槽说不建议大家用SDXL生态,即便已经出来了Turbo,即便除了SDXLLighting等等周边但是我们最最喜欢用的controlnet还是补全,即便是现在也不算完全意义的全,但是最起码我们今天呢能够带来第一个期待已久的tile模型,和隐藏款的QRmonsterXL(小声使用,别人还不

    2024年04月25日
    浏览(150)
  • 超详细,AI绘画里你不得不知道的SD算法详解

    前言 哈喽,各位小伙伴们大家好,说到AI绘画,可谓是近几年来异军突起,犹如洪水猛兽一般,各种的本土化,商业化。但是相信也有很多朋友跟我一样,对AI绘画的原理一知半解,甚至根本不知道它是怎么工作的。这样只靠着在网上复制粘贴别人的prompt,是没有点好处的,

    2024年02月11日
    浏览(89)
  • AI 绘画Stable Diffusion 研究(二)sd模型ControlNet1.1 介绍与安装

    部署包作者:秋葉aaaki 免责声明: 本安装包及启动器免费提供 无任何盈利目的 大家好,我是风雨无阻。 众所周知,StableDiffusion 是非常强大的AI绘图工具,需要详细了解StableDiffusion的朋友,可查看我之前的这篇文章: 最近大火的两大AI绘图工具 Midjourney VS StableDiffusion。 今天为大

    2024年02月15日
    浏览(60)
  • 自学前端,你必须要掌握的3种定时任务

    当你看到这篇博客的时候,一定会和狗哥结下不解之缘,因为狗哥的博客里不仅仅有代码,还有很多代码之外的东西,如果你可以看到最底部,看到投票环节,我相信你一定感觉到了,狗哥的真诚,狗哥是都么的,能,胡说八道。 目录  一、无处不在的定时任务 二、setTime

    2024年02月02日
    浏览(44)
  • 关于异步FIFO设计,这7点你必须要搞清楚

            在这篇文章,默认您已经对异步FIFO的设计方法有了基本的了解。         如果不了解异步FIFO设计的基本方法,可参考:异步FIFO的Verilg实现方法         格雷码是美国学者Frank Gray于1947年提出的一种二进制编码方式,后面这种编码方式就以他的名字命名。实际

    2024年02月07日
    浏览(61)
  • (十六) AIGC、AI绘画、SD-WebUI、本地部署、Stable-Diffusion本地模型、最新Controlnet扩展

    1、简介 AI绘画的工具网站很多,大部分收费/限制数量,而且速度很慢,如果部署本地的模型,不仅免费无限制、还可以提高出图效率,随意生成自己想象中的图,部署中发现有各种各样的环境配置问题,无法正确运行。 本博整理了SD-WebUI的整合包(Windows环境下),包括启动器

    2024年02月13日
    浏览(79)
  • 去新加坡旅游,你必须要收藏了解的当地电商欺诈风险!

    2月9日,除夕,中国与新加坡免签正式生效。免签政策简化了持普通护照中国游客入境新加坡的程序,使通关更为便捷。根据协定,双方持普通护照人员可免签入境对方国家从事旅游、探亲、商务等私人事务,停留不超过30日,为两国旅客往来提供了更多便利。 据上海机场边

    2024年02月22日
    浏览(52)
  • 初入mac电脑,你必须要知道这10款装机必备的宝藏软件

    初入mac电脑,不知道安装什么mac软件,这里整理了日常能给我工作和学习带来效率的10款软件分享给你们,个个都算得上是刚需,可以大大提高Mac的使用体验! 1、Downie 4 Mac 平台上非常好用的视频下载工具,支持1000 多个不同的视频网站,功能强大使用简单。 2、Magnet 这是一款

    2024年02月04日
    浏览(63)
  • 【Entity Framework】你必须要了解EF中数据查询之数据加载

    Entity Framework Core 允许在模型中使用导航属性来加载关联实体。有三种常见的O/RM模式可用于加载关联数据。 预先加载表示从数据库中加载关联数据,作为初始查询的一部分; 显示加载表示稍后从数据库中显示加载关联数据; 延迟加载表示在访问导航属性时,从数据库中以透

    2024年04月17日
    浏览(91)
  • CSS基础:你必须要知道的行高属性 line-height

    作者: WangMin 格言: 努力做好自己喜欢的每一件事 对于初学CSS的同学来说,会有很多属性相关的疑问,行高属性 line-height一定是其中一个,因为它是CSS中非常重要的一个属性,这个属性改变元素在网页中的行高,让你的网页看起来更加整洁,美观。 什么是行高? CSS中的行高(

    2024年02月05日
    浏览(55)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包