[stable-diffusion-art] 指北-5 controlnet

这篇具有很好参考价值的文章主要介绍了[stable-diffusion-art] 指北-5 controlnet。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

https://stable-diffusion-art.com/controlnet/https://stable-diffusion-art.com/controlnet/https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/mainhttps://huggingface.co/lllyasviel/ControlNet-v1-1/tree/mainControlNet V1.1 - a Hugging Face Space by hystsDiscover amazing ML apps made by the communityhttps://huggingface.co/spaces/hysts/ControlNet-v1-11.安装

!wget https://huggingface.co/lllyasviel/ControlNet-v1-1/resolve/main/control_v11p_sd15_openpose.pth -O ./extensions/sd-webui-controlnet/models/control_v11p_sd15_openpose.pth

resolve是下载,不是blob,extensions中就是直接把代码拉倒目录下即可

2.使用

[stable-diffusion-art] 指北-5 controlnet

[stable-diffusion-art] 指北-5 controlnet

[stable-diffusion-art] 指北-5 controlnet

参数:

enable:是否启用controlnet
invert input color:交换黑色和白色,在上传涂鸦scribble时,controlnet需要黑色背景和白色涂鸦,
如果使用外部软件创建涂鸦,就需要对颜色进行更改
RGB to BGR:改变上传图像的颜色通道顺序,上传normal图等,如果使用processor,就不需要了,
说白了就是不使用annotator的话,可以直接原图上传,但是要改一下通道顺序
low vram:低于8g显存可以用这个
guess mode:配合更高的steps,例如50,图像生成不受文本提示的引导
preprocessor:边缘图,深度图等,None表示使用输入图作为控制图
model:和sd大模型一起使用

weight:提示给予控制图的影响程度,它类似于prompt中的关键字权重,但是作用于控制图
guidance strength:用于于controlnet的步骤数,类似于图像到图像中的去噪强度,如果strength为1,
则应用于controlnet所有的采样步骤,如果strength为0.7,则steps为50的话,controlnet将应用于
70%的采样步骤,即前35个步骤

resize mode:当输入图或控制与要生成的图像大小不同时,调整大小模型
envelope(outer Fit):裁剪控制图,使其和画布保持一致
scale to Fit:使整个控制图适合画布
just resize: 独立缩放控制图的宽度和高度,使其适合画布尺寸,将改变控制图纵横比

[stable-diffusion-art] 指北-5 controlnet

controlnet weight相对于prompt的遵循控制图的程度,权重越低,controlnet对于图像遵循控制图的要求越少。

[stable-diffusion-art] 指北-5 controlnet

3.preprocessors

canny:边缘检测器,在提取曲线和直线上不错,但是易受噪声影响

depth:深度图表征图像中目标的距离,base表示近,黑色表示远

hed:适合人检测边缘生成轮廓

mlsd:快速直线检测器,对于室内设计,建筑图,街景等,不要传入带人像或者曲线

normal:生成表面有3d质感的图

openpose:关键点

pidinet:检测曲线和直线边缘,类似于hed,但通常会产生更清晰的线条和更少的细节

scribble:涂鸦

seg:为不同对象分类不同的颜色

mlsd、depth在室内设计都不错文章来源地址https://www.toymoban.com/news/detail-493185.html

到了这里,关于[stable-diffusion-art] 指北-5 controlnet的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • AI 作画《Concept Art概念艺术》| 用stable diffusion生成

    前言 “Concept Art”是一个艺术门类,即所谓“概念艺术”、“概念设计”,也称为“初步设计”。一般常见于影视或游戏设计中,服务产品最初的视觉效果,是游戏或影片的核心工作内容之一。 下面让我们使用当前很火的扩散模型stable diffusion,生成一些概念艺术作品!看看

    2024年02月11日
    浏览(53)
  • 当下最强的 AI art 生成模型 Stable Diffusion 最全面介绍

    目录 模型生成效果展示(prompt 全公开) 如何注册 Stable Diffusion 使用 SD(dreamstudio.ai )的收费标注如何 SD 提供哪些参数可以设置 如何使用种子来改进一张作品 我用 SD 创作的图片著作权如何归属,可以拿来商用吗? Stable Diffusion 背后的研发团队 SD 是如何训练出来的? SD 是开

    2024年02月03日
    浏览(36)
  • 智源AI日报(2022-08-26):当下最强的 AI art 生成模型 Stable Diffusion 最全面介绍

    【智源AI日报】每天速读5分钟,AI要事不错过! 欢迎点击这里,关注并订阅智源AI日报。 盘点 | 当下最强的 AI art 生成模型 Stable Diffusion 最全面介绍  看点:程序员漫画家西乔撰文,包括:关于SD的模型效果展示、注册方式、参数设置、收费标准、版权问题、改进方法以及SD研

    2024年02月10日
    浏览(35)
  • AI art 实验:同样的Prompt, DALLE2 跟 Disco Diffusion 的创作大比拼

    关门测试的 DALL·E 2 昨日放出消息,说刚向社区投放了 1000 个内测名额,赶紧奔去查我的邮箱!没有!还是没有,向几位我认识搞机器学习的大佬们托了人情也不行,没有插队的!(奔走掩面甩泪) 为什么那么多人在翘首期盼 DALL·E 2,看看下面这个创作实验就明白了。 这个

    2024年02月09日
    浏览(31)
  • 【Stable Diffusion】Stable Diffusion各类模型描述

    Stable Diffusion 是一种新型的生成模型,它可以用于生成高质量的图像、文本和音频等多种形式的数据。目前已经出现了许多基于 Stable Diffusion 模型的变种,下面简单介绍其中几种比较流行的模型: 模型链接:https://huggingface.co/stabilityai DDIM 是 Stable Diffusion 的第一个应用,它采用

    2024年02月16日
    浏览(34)
  • 【Stable Diffusion】Stable Diffusion免安装在线部署教程

    一、开启Google Colab网址 官网:https://colab.research.google.com/ 点击添加代码: 二、执行如下代码指令 点击执行按钮 会自动安装相关的套件、模型,然后等待运行完 注意:如果发生如下错误,该如何解决 RuntimeError:No CUDA GPUs are available 解决办法: 1、点击右上角点选硬件资源 2、

    2024年02月04日
    浏览(36)
  • Stable Diffusion 安装教程(详细)_stable diffusion安装

    引言 如果你只想简单尝试一下,仅仅图一乐,可以通过网页在线体验Stable Diffusion,可以今日免费的网站进行使用(https://stablediffusionweb.com/),只是功能不如本地的多。 本地部署安装Stable Diffusion有很多种方式,例如安装启动器,安装传统的Web Ui界面等等,它们的步骤看似繁

    2024年02月19日
    浏览(38)
  • 【扩散模型】11、Stable Diffusion | 使用 Diffusers 库来看看 Stable Diffusion 的结构

    参考:HuggingFace 参考:https://jalammar.github.io/illustrated-stable-diffusion/ Stable Diffusion 这个模型架构是由 Stability AI 公司推于2022年8月由 CompVis、Stability AI 和 LAION 的研究人员在 Latent Diffusion Model 的基础上创建并推出的。 其原型是(Latent Diffusion Model),一般的扩散模型都需要直接在像

    2024年01月16日
    浏览(35)
  • 【扩散模型】12、Stable Diffusion | 使用 Diffusers 库来看看 Stable Diffusion 的结构

    参考:HuggingFace 参考:https://jalammar.github.io/illustrated-stable-diffusion/ Stable Diffusion 这个模型架构是由 Stability AI 公司推于2022年8月由 CompVis、Stability AI 和 LAION 的研究人员在 Latent Diffusion Model 的基础上创建并推出的。 其原型是(Latent Diffusion Model),一般的扩散模型都需要直接在像

    2024年01月18日
    浏览(45)
  • Stable Diffusion stable-diffusion-webui开发笔记

    Stable Diffusion用来文字生成图片,ControlNet就是用来控制构图的,LoRA就是用来控制风格的 。 国内加速官网: mirrors / AUTOMATIC1111 / stable-diffusion-webui · GitCode 安装参考: Stable Diffusion安装与常见错误(+Lora使用)2023年最新安装教程_cycyc123的博客-CSDN博客 保姆级教程:从0到1搭建St

    2024年02月10日
    浏览(40)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包