Stable Diffusion 深度图像库插件使用小记-Toy模板网

这篇具有很好参考价值的文章主要介绍了Stable Diffusion 深度图像库插件使用小记。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

前言

Controlnet 横空出世以来，Stable Diffusion 从抽卡模式变为引导控制模式，产生了质的飞跃，再也不用在prompt中钻研如何描述生成人物的动作模式，他对AI画师来说生产力提高不知道多少倍，文末附100个Lora资源方便大家使用。对于论文作者，某渣深感佩服。

ControlNet直译即是控制网，是一个基于 Stable Diffusion 1.5 的轻型预训模型，在开发者张吕敏的论文demo中，他解释说ControlNet通过输入条件来控制预先训练的大型扩散模型，能利用输入图片（input image）里的边缘特征、深度特征或人体姿势的骨架特征（posture skeleton），配合文字 prompt，精确引导图像在 SD 1.5 里的生成结果。

这很好地解决了文生图大模型无法控制生成图片的细节这个难题。

简述

深度模式是Controlnet中可以使用的模式之一，

Depth模型是通过提取图片中的深度信息，进而生成具有同样深度结构的图。当原图中的人物有前后关系时，depth的效果更好。

深度模式的方式不在此文赘述，后期研究到了的时候再进行补充。本文仅对深度图像库插件进行总结。

安装

插件地址：https://download.csdn.net/download/bestpasu/87762319 GitHub - jexom/sd-webui-depth-lib: Depth map library for use with the Control Net extension for Automatic1111/stable-diffusion-webui

Depth map library for use with the Control Net extension for Automatic1111/stable-diffusion-webui。

Stable Diffusion 深度图像编辑器插件，配合ControlNet 插件进行图像生成引导，常被用于人像生成中引导手部生成使用。

该插件可在SD中对深度文件进行管理、编辑、生成，其自身已携带了部分手型深度图库，可直接支持常规手部动作。（常规的意思就是常见，火影的结印都不包括……需要的话可以通过3D工具生成）

插件的安装比较简单，下载插件后，将其解压在插件目录即可：

～/stable-diffusion-webui/extensions/

插件结构

插件文档结构如下：

.

├── LICENSE

├── README.md

├── images

│   └── ui.png

├── javascript

│   ├── fabric.js

│   └── main.js

├── maps

│   ├── hands

│   │   ├── 1_back.png

│   │   ├── 1_front.png

│   │   ├── 2_back.png

│   │   ├── 2_close_back.png

│   │   ├── 2_close_front.png

│   │   ├── 2_front.png

│   │   ├── 3_close_back.png

│   │   ├── 3_close_front.png

│   │   ├── 3_spread_back.png

│   │   ├── 3_spread_front.png

│   │   ├── 4_back.png

│   │   ├── 4_front.png

│   │   ├── 5_back.png

│   │   ├── 5_front.png

│   │   ├── YEAH_ROCK_a.png

│   │   ├── YEAH_ROCK_b.png

│   │   ├── bene_1.png

│   │   ├── bene_2.png

│   │   ├── birdie.png

│   │   ├── bowl.png

│   │   ├── bowl_open.png

│   │   ├── fist_bottom.png

│   │   ├── fist_front.png

│   │   ├── fist_side_a.png

│   │   ├── fist_side_b.png

│   │   ├── fist_top.png

│   │   ├── heart_half.png

│   │   ├── knuckle_crack.png

│   │   ├── point_front.png

│   │   ├── point_side_a.png

│   │   └── point_side_b.png

│   └── shapes

│   ├── circle.png

│   ├── hexagon.png

│   ├── square.png

│   └── star.png

└── scripts

├── __pycache__

│   └── main.cpython-310.pyc

└── main.py

通过插件文档结构，我们可以看到maps 目录下有 hands 和 shapes 两个目录，hands目录为手型深度模型图，全为左手（在编辑模式下只要180度水平翻转即可变成右手）。shapes目录为作者的示意目录，maps目录下可以任意新建目录存储不同类别的深度图像。创建后，重载UI界面或重启SD后便可在插件中显示。

Stable Diffusion 深度图像库插件使用小记