stable diffusion实践操作-大模型介绍

这篇具有很好参考价值的文章主要介绍了stable diffusion实践操作-大模型介绍。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

本文专门开一节写大模型相关的内容,在看之前,可以同步关注:
stable diffusion实践操作

模型下载网站
国内的是:https://www.liblibai.com
国外的是:https://civitai.com(科学上网)

一、发展历史

1 官方大模型

大模型从无到有训练大模型花费时间非常久,花费非常高,上百万美元:
stable diffusion实践操作-大模型介绍,SD,stable diffusion

2 CHECKPOINT

在官方大模型的基础上再次训练,就是我们看到的CHECKPOINT模型,但是对于硬件的要求还是很高,使用起来不是很灵活

3 EMBEDDING

后来发展出来了embedding模型,文件小,训练成本低,但是效果差强人意,好处是灵活

4 Lora 和Hypernetworks

二 什么是大模型

我们可以理解为各种绘画风格的打包集合,不像midjourney那样,想要什么风格,就在关键词中写上就可以了,比如,国风水墨,迪士尼等。如下:
stable diffusion实践操作-大模型介绍,SD,stable diffusion
Stable Diffusion就需要大模型来规定风格,比如国风模型,迪士尼模型等,具体参考checkpoint,选定这个模型后,那么你所有的关键词都是根据这个模型来确定的,也就是说,不同模型,关键词不一样,这也是SD比较难学的原因。
stable diffusion实践操作-大模型介绍,SD,stable diffusion

三 使用注意事项

通过二我们知道,每个大模型的关键词都不一样,所以下载大模型的时候要详细看作者说明,以及作者的关键词,通过关键词来学习,这样才能使用好这个大模型。

正文


序号 模型名称 简介
1 Stable Diffusion 常用官方模型V1.5版本 官方
2 Stable Diffusion XL1.0 官方
3 Anything 系列 二次元
4 Realistic Vision V2.0 写实模型
5 DreamShaper 人物肖像
6 MeinaMix 动漫
7 ChilloutMix 现实
8 majicMix系列
9 AbyssOrangeMix2_hard.safetensors 漫画

1、官方大模型

底模/大模型 是SD能够绘图的基础模型。安装完SD软件后,必须搭配基础模型才能使用。不同的基础模型,其画风和擅长的领域会有侧重。常见的模式,后缀ckpt,safetensors,大小在2-8G之间。
【1】Stable Diffusion 常用官方模型V1.5版本,v1-5-pruned.ckpt。
下载链接:https://openai.wiki/stable-diffusion-model-v1-5.html
【2】目前升级到新版本【Stable Diffusion XL1.0 正式版】
下载链接:https://www.liblibai.com/modelinfo/77a9ca05a2c7c93ceb05f4dceae9ed97
【3】Anything系列型号,偏向二次元
anything-v5-PrtRE.safetensors模型可以用于生成多种类型的图像,包括肖像、风景、动物、卡通、科幻等。它具有较强的适应性和泛用性,效果表现出较强的真实感和细节还原能力。
stable diffusion实践操作-大模型介绍,SD,stable diffusion

详细介绍链接:https://zhuanlan.zhihu.com/p/640797704

2、写实大模型Realistic Vision V2.0,

链接: https://pan.baidu.com/s/1wat_55oIRa-fSSleqpE1kw 提取码: 5u8w
stable diffusion实践操作-大模型介绍,SD,stable diffusion

3、DreamShaper

这个模型在肖像提示上表现得特别好,创造了一件令人惊叹的艺术品,捕捉到了主题的感觉和风格元素。在风景方面,DreamShaper能够创造出一个有趣而复杂的图像,具有鲜艳的色彩和迷人的细节。插图展示了充满活力的色彩和各种形状,使图像栩栩如生。
链接: https://pan.baidu.com/s/1zZeTk3J4odbWqjwJle_1Bg 提取码: ba47

4、MeinaMix

MeinaMix是最受欢迎的型号之一,这是有充分理由的。这个模型能够生成具有独特绘画般质量的精彩插图。与Anything模型非常相似,MeinaMix在人物方面专注于动漫风格,但它也能够生成复杂的插图。
链接: https://pan.baidu.com/s/1ECn3AAU6CBj_6rOriFn7ig 提取码: u24m
stable diffusion实践操作-大模型介绍,SD,stable diffusion

5、checkpoint模型下载,在C站,或者liblib上面,标签是checkpoint的就是。

stable diffusion实践操作-大模型介绍,SD,stable diffusion

6、ChilloutMix-KoreanDollLikeness

提到SD模型,Chillout是必不可少的。即使因为停止了后续更新,市场上已经涌现出了很多能够替代Chillout的模型,但Chillout依旧是一座丰碑:第一个爆火的真人模型。
Chillout在真人出图是统治级别的占有率 。是非常好的模型,但或许因为成熟的太早,也很快就停更了。最新版本是2023年2月的版本。

模型分为32和16两个精度,其中16精度可以大幅节省显存,但是因为玄学原因,我还是在用32精度的。
介绍以及下载链接:https://zhuanlan.zhihu.com/p/632997666

7 、majicMix系列

majic也是堪称封神的模型。作者是国人大佬麦橘。

明暗光影控制都非常到位,这种能够控制暗影部分效果的能力,是之前SD相比于MJ所相对较弱的部分,但是有了majic,就给补上了。尤其是女性的眼睛和神态,像戴了美瞳一样。甚至人物身上的小雀斑小痣都能够出现。尤其惊为天人的,是对男性的表现力。从肌肉到血管,都非常的真实。

有一个趣闻,就是AI博主娜乌斯嘉,娜娜酱,炼了自己的lora融进sombra后,作者直接在最新的V5版本里把娜娜酱融进了正式版,属于是真正的赛博永生了。

模型推荐用Euler作为采样器。

以及作者强调了N次的……不要开面部修复!
majic系列分了好几个,分别是:
stable diffusion实践操作-大模型介绍,SD,stable diffusion
stable diffusion实践操作-大模型介绍,SD,stable diffusion

7.1 majicMIX realistic:主打真实系,是通用版本。

下载介绍链接:https://www.liblibai.com/modelinfo/bced6d7ec1460ac7b923fc5bc95c4540

stable diffusion实践操作-大模型介绍,SD,stable diffusion

7.2 majicMIX fantasy:风格非常炸裂美好,但是远距离脸部需要inpaint以达成最好效果。

下载链接:https://www.liblibai.com/modelinfo/ab2e95bb3f3e746456d8955216865963
stable diffusion实践操作-大模型介绍,SD,stable diffusion

7.3 majicMIX lux:融合了,realistic和fantasy,是适合抽卡博梦想的模型。

7.4majicMIX horror:偏恐怖主题。

8. AbyssOrangeMix2_hard.safetensors

下载链接:https://www.liblibai.com/modelinfo/2bd0c7cec6e843f69ee446c9820adbf8
参考示例:
stable diffusion实践操作-大模型介绍,SD,stable diffusion
下面是一个生成的龙,是不是看着比以前的好多了

stable diffusion实践操作-大模型介绍,SD,stable diffusion

结尾


常用到的基础模型和插件(持续更新中)
链接:https://pan.baidu.com/s/1c9utQmWlGcRqLTr_kftTyA?pwd=1111
提取码:1111文章来源地址https://www.toymoban.com/news/detail-698773.html

到了这里,关于stable diffusion实践操作-大模型介绍的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • AI 绘画Stable Diffusion 研究(二)sd模型ControlNet1.1 介绍与安装

    部署包作者:秋葉aaaki 免责声明: 本安装包及启动器免费提供 无任何盈利目的 大家好,我是风雨无阻。 众所周知,StableDiffusion 是非常强大的AI绘图工具,需要详细了解StableDiffusion的朋友,可查看我之前的这篇文章: 最近大火的两大AI绘图工具 Midjourney VS StableDiffusion。 今天为大

    2024年02月15日
    浏览(45)
  • 【stable diffusion】保姆级入门课程-Stable diffusion(SD)介绍与安装

    目录 0.学前准备 1.什么是AI绘画 2.当前主流的AI绘画工具 3.什么是SD(stable diffusion) 4.SD能做什么 1.文生图 2.图生图 3.AI换模特,背景 5.使用stable diffusion配置要求 6.环境配置与安装 需要注意的地方: 扩展知识: 1.python 2.git 3.控制界面 7.SD的原理 8.结语 不需要了解相关知识的可以直

    2024年02月16日
    浏览(36)
  • Stable Diffusion(SD) Lora模型

    还有一个重要的点,就是你想固化的特征不要去打tag,打的tag不是单纯的对图片进行描述,还要考虑到是否是变量, tag尽量都是变量,也就是说是你期望模型生成的时候可以根据你的文字改变的。举个例子,一个红头发女孩,如果tag里面有red hair,AI会认为这个是可变量,后

    2024年02月02日
    浏览(44)
  • 第三课-界面介绍SD-Stable Diffusion 教程

    我们已经安装好了SD,这篇文章不介绍难以理解的原理,说使用。以后再介绍原理。 我的想法是,先学会画,然后明白原理,再去提高技术。 我失败过,知道三天打鱼两天晒网的痛苦,和很多人一样试了安装 github 版本,生成了几张图,发现效果不太理想,就放着了。后来也

    2024年02月13日
    浏览(34)
  • [Stable Diffusion]:WEBUI(SD)安装、常用模型(checkpoint、embedding、LORA)、提示词具、常用插件

    1. 安装Stable Diffusion Stable Diffusion的安装可能是第一步,但它绝对是重要的一步。以下是一些安装方式: ● AutoDL: AutoD镜像版本,现在维护到V16。镜像地址:AUTOMATIC1111/stable-diffusion-webui/tzwm_sd_webui_A1111。webui 1.6.0 整合版,支持 SDXL,一键启动,带视频教程。预置 ControlNet v1

    2024年02月04日
    浏览(40)
  • 【stable diffusion】图片批量自动打标签、标签批量修改(BLIP、wd14)用于训练SD或者LORA模型

    B站教学视频【:AI绘画】新手向!Lora训练!训练集准备、tag心得、批量编辑、正则化准备】 官方教程:https://github.com/darkstorm2150/sd-scripts/blob/main/docs/train_README-en.md#automatic-captioning 1.1 打标界面 根据需求,选择通用打标模型(BLIP)还是动漫打标模型(deepbooru) 设置好后,选择

    2024年02月12日
    浏览(46)
  • (十六) AIGC、AI绘画、SD-WebUI、本地部署、Stable-Diffusion本地模型、最新Controlnet扩展

    1、简介 AI绘画的工具网站很多,大部分收费/限制数量,而且速度很慢,如果部署本地的模型,不仅免费无限制、还可以提高出图效率,随意生成自己想象中的图,部署中发现有各种各样的环境配置问题,无法正确运行。 本博整理了SD-WebUI的整合包(Windows环境下),包括启动器

    2024年02月13日
    浏览(48)
  • stable diffusion实践操作-提示词

    stable diffusion实践操作 stable diffusion实践操作-提示词-人物属性 stable diffusion实践操作-提示词-人物服饰 stable diffusion实践操作-提示词-整体环境 stable diffusion实践操作-提示词-图片结构 stable diffusion实践操作-CLIP 本文专门开一节写提示词相关的内容. SD提示词是以词组作为单位的,

    2024年02月09日
    浏览(34)
  • stable diffusion实践操作-VAE

    stable diffusion实践操作 VAE,全名Variational autoenconder,中文叫变分自编码器。作用是:滤镜+微调 ,名字中带有vae,后缀ckpt,pt 有的大模型是会自带VAE的,比如我们常用的Chilloutmix。如果再加VAE则可能画面效果会适得其反 。 大部分底模有VAE,但是部分底模没有VAE,需要专门下载

    2024年02月10日
    浏览(29)
  • stable diffusion实践操作-hypernetworks

    本文专门开一节写hypernetworks的内容,在看之前,可以同步关注: stable diffusion实践操作 提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档 `本章注意要介绍Hypernetwork,也叫做超网络,下面是一个原理概述。 中文名字叫超网络,功能和embedding,lora类似,

    2024年02月10日
    浏览(28)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包