【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二)

这篇具有很好参考价值的文章主要介绍了【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、Web界面

Stable Diffusion Web UI界面参数说明:
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

二、大模型

Stable Diffusion 模型俗称大模型(Checkpoint),是最重要的模型,有它才可以生成图像,用于确立基本画风。
文件的存放路径:根目录\models\Stable-diffusion
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

推荐两个大模型
① Stable Diffusion开源的1.5版本模型(偏真实风格)

  • 模型下载地址:https://huggingface.co/runwayml/stable-diffusion-v1-5/tree/main
    【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

② AbyssOrangeMix(外网非常受欢迎的二次元风模型,俗称“深渊橘”模型)

  • 模型下载地址:https://civitai.com/models/4437/abyssorangemix2-sfwsoft-nsfw
    【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记
    注意:模型下载网址需要科学上网哟~

来一波福利—— 在这里给大家整理了一些模型下载的网站:

  • 抱脸网站(Huggingface):主要提供主流 AI 绘画模型下载。
  • SD - WebUI资源站(123114514.xyz):页面简洁,分类明确;游戏人物模型和画师风格模型比较多;
  • C站(Civitai):AI艺术共享平台,可下载海量SD开源模型(推荐)。
  • 哩布哩布ai网站(LiblibAI):中国领先原创AI模型分享社区,其界面风格与C站极为相似(推荐)。
  • 吐司ai(TusiArt):一个国内可用、免费在线生成图像的AI绘画模型分享社区。

三、VAE模型

VAE全称叫做“变分自解码器”,负责将加噪后的潜空间数据转化为正常的图像,理解为AI绘图的一种“调色滤镜”。
文件的存放路径:根目录\models\Stable-diffusion 或 models\VAE

四、Embedding 模型

俗称嵌入式模型,也叫做Textual Inversion,通俗的讲其实就是把提示词打包成为一个提示词的词包,在提示词中加入对应的关键词即可使用。常作为反向提示词使用,减小出错概率,提升出图质量下限。

文件的存放路径:根目录\embeddings
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

五、Lora模型

全称:Low-Rank Adaptation Models 翻译成中文叫做 大模型的“低秩适应”,常用于固定角色特征和风格化。
Lora是需要和一个大的Checkpoint一起搭配使用的,从而实现对这个Checkpoint在某些方面的“微调”。
Lora文件是可以随意重命名的,尽量用纯英文且不包括空格的方式来命名。

lora有两种形式,使用方法有三种:
① lora原生
文件的存放路径:根目录\models\Lora
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记
第一种用法,是直接在提示词里输入,比如:lora:hanfu_v3:0.75
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记
第二种用法,附加模型选单,选择其中一个lora就可以添加到正向或反向提示词中【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记
② lora插件
文件的存放路径:根目录\extensions\sd-webui-additional-networks\models\lora

第三种用法,附件网络扩展(与提示词撰写是完全独立分开的,不会出现在提示词里)
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记
扩展插件:Additional Network
安装方法:可通过扩展-可下载-搜索“Network”找到Kohya-ss Additional Networks,点击安装,然后重启Web UI即安装成功
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

注意:通过扩展插件读取的Lora目录,默认是在extensions文件夹内(建议将两个lora的路径统一起来,可以方便地使用任何一种方式调用LoRA)
在Web UI界面-设置,找到下面控制插件的Additional Network,将 根目录\models\Lora 目录地址拷贝进来,保存设置,刷新一下,再到扩展插件使用
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

六、Hypemetwork 模型

Hypernetwork 中文名(超网络)类似于低配版的LoRA模型,但因为训练难度高已被淘汰;
文件的存放路径:根目录\models\hypernetworks

AI 绘画Stable Diffusion 研究(十六)SD Hypernetwork详解

七、模型安装位置

下载模型后需要将之放置在指定的目录下,推荐一个简单的安装方法
B站 秋葉aaaki 大佬提供的网站:Stable Diffusion 法术解析
【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二),AI绘画,AI作画,stable diffusion,学习,AIGC,笔记

八、总结

模型名称 文件大小 安装目录 文件格式
Stable Diffusion 模型(Checkpoint) 几GB \models\Stable-diffusion .ckpt
.safetensors
外挂 VAE 模型(VAE) 几百MB \models\VAE .vae
嵌入式(T.I Embeddings) 几十KB \extensions .pt
低秩模型(Lora) 几十到一百多MB \models\Lora .safetensors
超网络(Hypemetwork) 几十MB \models\hypernetworks .safetensors

SD的模型使用规则为:大模型 + 拓展模型
其中Checkpoint是大模型,其余皆为拓展模型,大模型可以单独使用,拓展模型必须搭配大模型使用

以上是本次分享全部内容。
非常感谢您阅读本篇博客文章。希望这篇文章能够为您提供有价值的信息,并帮助您解决问题或增长知识。如果您对文章内容有任何问题、建议或反馈。同时,也欢迎您继续关注我的博客,获取更多有趣、实用的内容。
期待与您在下一篇文章再次见面。谢谢!文章来源地址https://www.toymoban.com/news/detail-801911.html

到了这里,关于【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Stable Diffusion 绘画入门教程(webui)

    随着mj和sd绘画软件发布之后,AI绘画开始爆火,很多小伙伴已经挖掘出很多的玩法,哪怕最基础的AI美女、AI壁纸、真人漫改等等都赚的盆满钵满,当然现在入局也不算晚,不同的行业基础依然能开发出很多有趣的玩法。 随着使用的深入,各路大神挖掘出更多的玩法,比如创

    2024年02月21日
    浏览(33)
  • Stable Diffusion 绘画入门教程(webui)-提示词

    通过上一篇文章大家应该已经掌握了sd的使用流程,本篇文章重点讲一下提示词应该如何写 AI绘画本身就是通过我们写一些提示词,然后生成对应的画面,所以提示词的重要性不言而喻。 要想生成更加符合自己脑海里画面的图片,就尽量按照标准化把提示词按照模版写

    2024年02月21日
    浏览(33)
  • Stable Diffusion 绘画入门教程(webui)-ControlNet(IP2P)

    上篇文章介绍了深度Depth,这篇文章介绍下IP2P(InstructP2P), 通俗理解就是图生图,给原有图加一些效果,比如下图,左边为原图,右边为增加了效果的图: 玩法流程和之前一样哦 我这里用的大模型是\\\"anything-v5-PrtRE.safetensors\\\",选用不同模型生成效果会有区别,可以自己找喜欢的

    2024年04月25日
    浏览(42)
  • 【AI绘图 丨 Stable_diffusion 系列教程四】— Window 环境 | Stable Diffusion入门教程 及安装(全篇)

      最近,AI图像生成引人注目,它能够根据文字描述生成精美图像,这极大地改变了人们的图像创作方式。Stable Diffusion作为一款高性能模型,它生成的图像质量更高、运行速度更快、消耗的资源以及内存占用更小,是AI图像生成领域的里程碑。本篇文章作者将手把手教大家入

    2024年02月13日
    浏览(40)
  • 【AI绘图 丨 Stable_diffusion 系列教程一】— Window 环境 | Stable Diffusion入门教程 及安装(上篇)

    不过确实,Midjourney生成的图片很难精准的控制,随机性很高,需要大量的跑图(为此我也回复了很多很多信息就是让小伙伴们多跑图...),不过没关系,受到社群小伙伴们的强烈建议(也包括我可以少回复点消息),我在这篇文章中为大家分享SD的教程。 这时候肯定有朋友心

    2024年02月09日
    浏览(31)
  • 从0到1,入门到进阶玩转AI——Stable Diffusion超详细教程(一)

            目前市面上的AI主要集中在两方面,一方面是AI 作图(代表产品:Midjourney和Stable-Diffusion),一方面是AI应答(代表产品:ChatGPT),本文主要针对AI作图进行探索。         由于Midjourney是一款付费产品,而Stable-Diffusion最大的优势就是开源免费。因为开源免费的原因

    2024年02月17日
    浏览(26)
  • 从0到1,入门到进阶玩转AI——Stable Diffusion超详细教程(二)

    上一篇我们搭建好基本Stable Diffusion基础环境,本章为大家提供各种插件玩法,希望能让您玩的更加开心。 CUDA是 NVIDIA 专为图形处理单元 (GPU) 上的通用计算开发的并行计算平台和编程模型,启用CUDA可以帮助我们调用GPU运算(当然,不装也可以,但是效率会差些) 查看适用于

    2024年02月15日
    浏览(31)
  • 【AI绘画】Stable Diffusion学习——安装与使用教程(一)

    1、Python 官网:https://www.python.org/downloads/ 建议安装3.10开头的版本号,下载安装包后运行即可 (安装python,建议安装3.10.6版本,这个是Stable Diffusion WebUI作者推荐安装版本) 将Python添加到默认路径,否则后面很多调用Python进行的操作都会失灵 安装完成之后,检查Python版本 按

    2024年02月03日
    浏览(43)
  • Stable Diffusion使用入门教程

    本文参考bilibili的链接:B站第一套系统的AI绘画课!零基础学会Stable Diffusion,这绝对是你看过的最容易上手的AI绘画教程 | SD WebUI 保姆级攻略_哔哩哔哩_bilibili 目录  一、prompt提示词 1、概况 2、prompt分类 3、提示词的权重分配 4、反推提示词 5、提示词网站 二、WebUI参数说明

    2024年02月09日
    浏览(46)
  • stable diffusion 零基础入门教程

    一、前言 Midjourney 生成的图片很难精准的控制,随机性很高,需要大量的跑图,但Stable Diffusion可以根据模型较精准的控制。 SD 效果图展示: 二、Stable Diffusion 介绍 Stable Diffusion 是一款基于人工智能技术开发的绘画软件,它可以帮助艺术家和设计师快速创建高品质的数字艺术

    2024年03月10日
    浏览(60)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包