stable diffusion插件controlnet的详细讲解以及用法说明

这篇具有很好参考价值的文章主要介绍了stable diffusion插件controlnet的详细讲解以及用法说明。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

简介

controlnet是基于只能绘画AI-stable diffusion推出的一款功能强大的插件,它为文生图功能引入了新的控制方式,可以额外控制人物的具体姿势,景深,线稿上色等等,可以更稳定的控制画面。

安装

插件安装

  1. 在stable diffusionUI界面中找到扩展stable diffusion controlnet,AI绘画,stable diffusion,人工智能

     文章来源地址https://www.toymoban.com/news/detail-804274.html

  2. 在扩展中找到<从网址安装>stable diffusion controlnet,AI绘画,stable diffusion,人工智能

     

  3. 当出现如下提示,则表示插件安装完成stable diffusion controlnet,AI绘画,stable diffusion,人工智能

     

模型安装

模型安装分为预处理模型和controlnet所需要的模型。

先安装预处理模型,打开AI所在的根目录输入这个地址novelai-webui\extensions\sd-webui-controlnet\annotator,将对应的预处理模型放进对应的文件夹中即可,而controlnet所需模型则是novelai-webui\extensions\sd-webui-controlnet\models,放在该文件夹下即可。

上述操作完成后打开我们的本地部署,在扩展中点击应用并重启即可。stable diffusion controlnet,AI绘画,stable diffusion,人工智能

 

本地部署重启之后就可以看到新的controlnet的选项了。

controlnet模型功能及参数分析

  • canny(边缘检测算法):一般用于参考图的线稿提取,

    • Low VRAM该选项可以在你显存低于4G时开启,能够发挥最好的效果,高于4G可以不选

    • weight该选项表示使用controlnet的权重,权重越高越倾向于权重高的描述,一般使用默认值即可

    • Annotator resolution注释器分辨率,参数的大小影响模型的精度,当然越大,越消耗显存stable diffusion controlnet,AI绘画,stable diffusion,人工智能

       

      512分辨率

      stable diffusion controlnet,AI绘画,stable diffusion,人工智能1024分辨率

       

    • Preview annotator result预览注释器的结果,点击该按钮可以查看模型质量stable diffusion controlnet,AI绘画,stable diffusion,人工智能

       

  • depth(深度图检测算法):一般用于提取物体边缘轮廓,没有物体内部的细节stable diffusion controlnet,AI绘画,stable diffusion,人工智能

     

  • hed(边缘检测算法):canny提取线稿更硬朗,hed提取的线条更圆润stable diffusion controlnet,AI绘画,stable diffusion,人工智能

     

  • mlsd(线段检测算法):一般用于建筑、物体的检测,常用于室内装潢,建筑设计
  • normal_map(法线图检测算法):会一定程度上保留物体内部的细节stable diffusion controlnet,AI绘画,stable diffusion,人工智能
  •  openpose(人物骨骼检测算法):提取人物的骨骼stable diffusion controlnet,AI绘画,stable diffusion,人工智能

 

好了,以上就是本期文章的全部内容了,如果本期内容对你使用stable diffusion有一定帮助,不妨点个赞吧,后续有什么问题也可以小窗私信我,看到留言后我会回复的。

到了这里,关于stable diffusion插件controlnet的详细讲解以及用法说明的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Stable Diffusion Controlnet V1.1 基础用法

    用于ControlNet和其他基于注入的SD控件的WebUI扩展。针对 AUTOMATIC1111 的 Stable Diffusion web UI 网络用户界面的扩展,它可以让网络界面在原始的 Stable Diffusion 模型中添加 ControlNet 条件来生成图像。 这种添加是实时的不需要进行合并。使人们能从参考图像复制构图或人物姿态。老练的

    2024年02月11日
    浏览(36)
  • 精讲stable diffusion的controlNet插件

    controlNet插件是stable diffusion的一个重要插件,甚至可以说正是因为有了controlNet插件,stable diffusion才会具有midjourney所不具备的独特魅力! 我们今天就一起来学习下controlNet插件的安装和每个模型的用法 插件主页 独立的controlNet程序(可独立运行,不依赖于stable diffusion)主页:

    2024年02月06日
    浏览(36)
  • stable-diffusion安装controlnet插件

    1)extensions → install from URL → install 然后填入:https://github.com/Mikubill/sd-webui-controlnet 2)installed → apply and restart UI 下载controlnet模型(50G左右)到 E:stable-diffusion-webuiextensionssd-webui-controlnetmodels 目录下: lllyasviel/ControlNet at main 把所有8个模型放到models文件夹下 (待续)

    2024年02月12日
    浏览(50)
  • Stable Diffusion ControlNet 插件预览错误解决方案

            在使用 Stable Diffusion ControlNet 插件 时,进行预处理时报错,网络上暂无详细的解决方案,故写此文。 本人软件版本: 秋叶大佬整合包v4.6.1 ControlNet v1.1 Wei UI v1.6          如图所示,在放入强尼银手(bushi)的图片后,使用ControlNet进行预处理时报错,猜测是由

    2024年04月16日
    浏览(35)
  • Stable Diffusion Controlnet V1.1 的14种基础标志用法

    用于ControlNet和其他基于注入的SD控件的WebUI扩展。针对 AUTOMATIC1111 的 Stable Diffusion web UI 网络用户界面的扩展,它可以让网络界面在原始的 Stable Diffusion 模型中添加 ControlNet 条件来生成图像。 这种添加是实时的不需要进行合并。使人们能从参考图像复制构图或人物姿态。老练的

    2024年02月04日
    浏览(40)
  • 万字长文解读Stable Diffusion的核心插件—ControlNet

    目录 一、介绍 二、使用方法 三、ControlNet结构 1.整体结构 2.ControlLDM 3.Timestep Embedding 4.HintBlock 5.ResBlock 6.SpatialTransformer 7.SD Encoder Block 8.SD Decoder Block 9.ControlNet Encoder Block 10.Stable Diffusion 四、训练 1.准备数据集 2.生成ControlNet模型 3.执行训练 五、其它 1.损失函数 2.随机替换提示

    2023年04月14日
    浏览(48)
  • Stable Diffusion - 图像控制插件 ControlNet (OpenPose) 配置与使用

    欢迎关注我的CSDN:https://spike.blog.csdn.net/ 本文地址:https://spike.blog.csdn.net/article/details/131591887 论文:Adding Conditional Control to Text-to-Image Diffusion Models ControlNet 是神经网络结构,用于控制预训练的大型扩散模型,以支持额外的输入条件。ControlNet 以端到端的方式学习任务特定的条

    2024年02月13日
    浏览(39)
  • 探索【Stable-Diffusion WEBUI】的插件:ControlNet 1.1

    本篇主要提到ControlNet新版本的使用,和旧版本的变化,并偷懒参考了别人很不错的文章。 更多不断丰富的内容参考:🔗 《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》 WEBUI的插件里, ControlNet 是少数几个不需要翻译的插件,因为翻译了也没意思: 控制网络 ? 它的作用是

    2024年02月09日
    浏览(60)
  • 详细解读ControlNet Stable Diffusion代码

    Diffusion models代码解读:入门与实战 前言 :ControlNet的原理部分可以看我之前写的博客《Image-to-Image任务的终结者:详解ControlNet原理与代码》 ,这篇博客主要讲解一下diffusers版本的ControlNet代码,从代码中洞悉原理,加深理解。 目录 原理详解

    2024年02月12日
    浏览(50)
  • stable diffusion插件controlnet1.1全面升级,大幅提高出图质量

    哈喽,各位小伙伴们大家好,有一段时间没更新了,最近的AI绘画圈呀,可谓是一天一个黑科技。这不,最近controlnet插件更新了,我也是马上就下载下来用了一下。 好家伙,不用不知道啊,一用吓一跳。废话不多说,直接上才艺,这是我用最新的版本,也就是controlnet1.1版本

    2024年02月16日
    浏览(107)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包