AI绘图软件Stable Diffusion 安装和使用之二controlnet插件

这篇具有很好参考价值的文章主要介绍了AI绘图软件Stable Diffusion 安装和使用之二controlnet插件。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

本期说一下Stable Diffusion非常有名的插件controlnet。同上一篇一样,我们安装b站大佬秋葉aaaki(有的网友戏称他/她是赛博佛祖)的stable diffusion4.2整合包。解压缩以后,打开启动器,见下图,界面比早期版本更好看了。

​编辑​

启动器打开以后,安装controlnet插件

填写网址:https://jihulab.com/hanamizuki/sd-webui-controlnet

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

ControlNet还需要一些预处理器和模型,它们和整合包一起下载就可以了,然后拷贝到Stable Diffusion对应文件夹。

预处理器\downloads拷贝至D:\StableDiffusion\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\annotator

\模型下面的文件拷贝至D:\StableDiffusion\sd-webui-aki-v4.2\models\ControlNet

在上一篇中,生成图片需要提示词,现在一些网站提供图片和提示词。我们也可以利用图生图中的反推提示功能。

在网络上随便找一张好看的图片,比如下图,点击“DeepBooru反推”按钮,本图的提示词就会生成在左边文本框中。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

因为孩子平时喜欢买线稿人物图上色,我们以给线稿上色为例说明ControlNet插件的功能。启用Controlnet,预处理使用invert,模型使用lineart—_anime。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

将刚才生成的提示词放在文生图的提示词框中,点击“生成”按钮,生成的成果图见下图。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

再找一张别的风格照片,比如下张雨中打伞的姑娘,反向生成提示词。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

将生成的提示词放在文生图的提示词框中,点击“生成”按钮,重新生成的成果图见下图。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

下图是诛仙中的陆雪琪。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

将其提示词放在文生图中的提示框内,重新生成的效果图如下。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

我们也可以将原图生成线稿图,比如下图,预处理器选择lineart_realistic,模型不变。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

点击“生成”按钮,生成线稿图如下。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

Controlnet还可以将低分辨率图像进行高清修复。比如说,自己的头像是很多年前拍摄的,当时像素低,现在利用Controlnet的tile模型进行修复。

首先,找一张明星照片,比如金城武,生成反向提示词。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

然后,拷贝生成的提示词至文本框,预处理选择tile_resample,模型tile。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

点击“生成”按钮,生成的效果如下图,仿佛一颗冉冉升起的新星,帅呆了。

AI绘图软件Stable Diffusion 安装和使用之二controlnet插件,其他,经验总结,人工智能,stable diffusion

小结

最近人工智能发展非常快,特别是机器学习方面,比如AI绘图就是通过机器学习训练生成模型,然后在模型的基础生成同模型的风格化照片。随后,AI绘图进一步演化为换衣服、换脸,半身生成全身,扩充场景等。AI绘图会让一些画师失业,但是拥抱新技术的画师则会极大地提高工作效率,收益更胜从前。

参考文献

https://zhuanlan.zhihu.com/p/643744230

https://www.bilibili.com/video/BV1fa4y1G71W/?spm_id_from=333.999.0.0

https://www.bilibili.com/video/BV1AL411q7Ub/?spm_id_from=333.999.0.0&vd_source=6f9f0ad1eef623c5a58999f0093952a1

https://www.bilibili.com/video/BV1f14y197rx/?spm_id_from=333.337.search-card.all.click&vd_source=6f9f0ad1eef623c5a58999f0093952a1

https://www.bilibili.com/video/BV1Xv4y1E7kZ/?spm_id_from=333.337.search-card.all.click&vd_source=6f9f0ad1eef623c5a58999f0093952a1文章来源地址https://www.toymoban.com/news/detail-756869.html

到了这里,关于AI绘图软件Stable Diffusion 安装和使用之二controlnet插件的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • stable diffusion AI绘图工具的安装和使用centos7.8系统

    重要 【AI作画】stable diffusion webui Linux虚拟机 Centos 详细部署教程 服务器CentOS 7 安装 Stable Diffusion WebUI ,并映射到本地浏览器 CentOs7 + Stable Diffusion + Novel AI实现AI绘画 stable diffusion webui安装部署教程 wget报错原因:ERROR: cannot verify xxx’s certificate…use --no-check-certificate wget --no-chec

    2024年02月06日
    浏览(70)
  • AI绘画软件Stable Diffusion安装使用心得

    一般学习一个新软件,第一件事就是安装,Stable Diffusion是面向开发者使用的,所以安装会有门槛,我先是按网上安装教程一步一步的操作,安装过程需要下载大量数据包,还需要外网,安装过程非常慢,还总是报错,花了很长时间差点要放弃了,不过最后还是换了个思路:一

    2024年02月01日
    浏览(57)
  • AI 绘画Stable Diffusion 研究(二)sd模型ControlNet1.1 介绍与安装

    部署包作者:秋葉aaaki 免责声明: 本安装包及启动器免费提供 无任何盈利目的 大家好,我是风雨无阻。 众所周知,StableDiffusion 是非常强大的AI绘图工具,需要详细了解StableDiffusion的朋友,可查看我之前的这篇文章: 最近大火的两大AI绘图工具 Midjourney VS StableDiffusion。 今天为大

    2024年02月15日
    浏览(60)
  • 【AI绘图】二、stable diffusion环境准备与安装

    前一篇:一、stable diffusion的发展史 放一张SD的效果图 Stable Diffusion是使用显卡生成图片,对电脑硬件有一定要求。 电脑配置最核心的关键点: 看显卡、看内存、看硬盘、看 CPU。 显卡:N 卡(英伟达 Nvida 独立显卡)首选,最低 10 系起步,体验感佳用 40 系, 显存最低 4G,6G

    2024年02月09日
    浏览(62)
  • Stable Diffusion AI绘图使用记录

    官方网站https://github.com/AUTOMATIC1111/stable-diffusion-webui 跟着一步步安装就行(英文版的)  下载控制插件Contro lnetGitHub - Mikubill/sd-webui-controlnet: WebUI extension for ControlNet  按照官方的安装方式安装 1、打开“扩展”选项卡。在选项卡中打开“从 URL 安装”选项卡。 2、输入“扩展的

    2024年02月07日
    浏览(45)
  • AI绘图入门 安装 stable-diffusion-webui

    先看样张: https://www.python.org/downloads/ Git - Downloads (git-scm.com) 1. 新建文件夹 (不能有中文,建议放在空闲比较多的硬盘上),然后再文件夹打开命令行 2. 克隆 Nvidia显卡 AMD显卡 AMD GPU 说明 CPU 选择上面任意一个都可以 下载慢可以请求头加https://ghproxy.com/ 如: https://ghproxy.com/

    2024年02月06日
    浏览(56)
  • Stable Diffusion+ControlNet+Lora 指导AI+艺术设计的WebUI全流程使用教程

    设计师们往往对于新出的绘画工具上手比较艰难,本文针对目前比较火热的Stable Diffusion+ControlNet指导AI艺术设计的工具使用进行全面讲解。很多人会有预感,未来要么设计师被图形学程序员取代,要么会使用AI工具的设计师取代传统设计师,2023年开始,AI辅助设计甚至主导设计

    2024年02月07日
    浏览(56)
  • AI 绘图 Stable Diffusion(一) 环境安装 Mac、Windows 详细流程

    Stable Diffusion 与 Midjourney 的区别,个人比较喜欢优点里面的不受约束这条。 配置要求 安装 Git 1、【 Mac 】使用 HomeBrew 进行 快捷安装,文章内部有安装部分(注意如果是 zsh 解释器需要修改的事 .zshrc 环境变量文件, git 安装存放路径以输出的为准)。 2、【 Mac 、 Windows 】通过

    2024年04月23日
    浏览(57)
  • AI绘图cuda与stable diffusion安装部署始末与避坑

    stable diffusion的安装说起来很讽刺,最难的不是stable diffusion,而是下载安装cuda。下来我就来分享一下我的安装过程,失败了好几次,几近放弃。 我们都知道cuda是显卡CPU工作的驱动(或者安装官网的解释为一个GPU加速器app),这里么有什么介绍的,既然是驱动就要安装对版本

    2024年04月10日
    浏览(41)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包