AI 创业指难(一) :Stable Diffusion AI 绘画怎么用

这篇具有很好参考价值的文章主要介绍了AI 创业指难(一) :Stable Diffusion AI 绘画怎么用。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一. 前言

一年不到,AI对生活和工作的影响已经逐步体现。所以千万别掉队了,也许 AI 不能成为我们的主要工作,但是如何借助 AI 实现副业的扩展同样值得思考。

这一篇就来讲一个 AI 绘画工具,这个工具我也是才上手不久,所以我把这其中的一些笔记分享出来,希望大家都能融入到这个新的时代。

Stable Diffusion

stable diffusion 本质上是一个 AI 绘图生成工具,我想大家肯定听说过它的竞品 : Midjourney

之所以选择 Stable Diffusion 的主要原因就是它免费,本地就可以搭建,开源资源丰富 , 适合我们这些业务人员去折腾。

实测 4060 笔记本显卡一张图 1024 大小的图大概在 10S 左右 , 如果嫌慢不要紧, 阿里云买一个抢占式的 GPU 服务器再部署一套到云环境上面,一小时也只要3块钱。

  • 欠拟合 :指模型不能在训练集上取得好的结果。学了又好像没有完全学会
  • 过拟合 :指在训练集上表现很好,但是测试集上表现很差
  • 不收敛 : 训练失败,根本没学会
  • 泛化能力 :指的AI对未知样本的推理、适应能力

二. 安装和使用

基础安装太简单了,果然玩图的大佬都是热心肠,这里推荐直接使用 sd-webui-aki Bilibili 地址。

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

启动的效果就是这样,入门使用只需要关注2个点 :

  • 模型管理 : 在各模型网站下载对应模型后添加进去即可
  • 一键启动 : 直接启动运行

几个好用的模型网站 :

  • 土司 : tusiart.com/
  • civitai : civitai.com/
  • liblib : www.liblib.ai/

三. 使用方式

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

整个主界面大致如下 ,来简单说一下其中这些关键的信息 :

👉 001 : 基础模型是什么?

模型就是我们在上述模型网站中找到的喜欢的模型,模型很多,我们只需要找到自己想要生成的去下载即可

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

下载完模型后,将模型添加到工具的模型管理中,然后在主界面模型旁边点击刷新就能应用上去。

模型也有对应的类型,这里简单概述下 :

  • LoRA :通常用于人物和概念,体积小且控图效果好,常用于固定角色特征
  • Checkpoint : 体积较大,用于控制画风
  • Embedding : 适用于控制画风和人物,相对速度中等
  • Dreambooth : 可以用于人物,概念和画风,对配置要求较高

对我这种新手来说基本上不关注这个,模型训练可能是后续的实践中才需要使用到。

👉 002 : VAE 模型是什么 ?

Variational autoenconder,中文叫变分子编码器 ,主要的作用就是滤镜。在出图的时候会影响颜色和线条

一般大模型里面都会自带 VAE , 出图如果有问题才可能需要用到它

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

尝试了一下,左边的为原厂模型,右边加了其他 VAE. 虽然不明显,但是在颜色上还是有一些色差。

👉 003 / 004 : 提示词怎么写 ?

提示词分为正向提示词和反向提示词 ,

  • 正向提示词
    • 通过提示词 来指定生成的图像
    • 提示词的顺序会影响到图像的生成 ,前面的提示词权重更大
  • 排除词
    • 用于指定图像中不期望出现的东西 (低质量,小图,五官不全)
  • 权总
    • stable diffusion 支持对提示词进行权重设置,点击提示词按 Ctrl + 上下方向键

那么提示词该怎么去找,去哪里找呢?

方案一 : 通过 Stable Diffusion 的工具反推提示词

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

直接把图片拖进去,就能得到对应的提示词,后续直接使用即可。

方案二 : 去模型网站或者图站查找提示词

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

一般下载的模型下面都能找到一些效果图,点进去就能看到对应的提示词

方案三 : 找 GPT 问或直接写

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

👉 005 :步数的作用是什么 ?

  • 迭代每一步都是在前一步的基础上进行处理
  • 低的采样步数会导致画面计算不完整,高的采样步数仅在细节处进行优化,对比输出速度得不偿失

👉 006 :采样方式有什么用 ?

采样方式指的是模型生成图像时所采用的策略,决定了如何从模型的输出分布中选择样本。

不是很了解,帮不了太多,但是文档我给你们找好了呀!!!

上文界面里面的采样方式主要有以下区别 :(PS 这一块网上资料也不多,只能做到这个地步了

算法 速度 步数 优 / 缺点 场景
Euler a 20-30 1. 适当的步长出图更快 2. 步长过大会过度拟合,图像变形
3. 富有创造力 ICON , 二次元,小场景
Euler 20-30 - 基于Karras论文
LMS 30+ 1. 效果一般,比较抽象 , 质感OA,饱和度与对比度偏低,更倾向于动画的风格
2. 线性多步调度器(Linear multistep scheduler)
Heun 20-30 - 基于Karras论文
DPM2 20-30 该采样方法对tag的利用率最高,几乎占80%+
DPM2 a 25-30 几乎与DPM2相同,对人物可能会有特写
DPM++ 2S a 20-30
DPM++ 2M 20-30
DPM++SDE
DPM++2S a Karras - 在每个时间步长中执行多次操作
- 同等分辨率下细节更多
- 步长越多细节越明显
写实人物,复杂场景
DPM++ 2M Karras 20-30 1. 是二阶扩展概率模型求解的算法 2. 可以在速度和质量之间平衡
DPM ++ SDE Karras 8-12
DDIM 10-15 1. 步数越多细节越丰富 2. 收敛快,可以快速生成高质量图像
写实人像,复杂场景刻画
UniPc 20-30
DPM adaptive 10
LMS Karras 20 会大改成油画的风格,写实不佳
DPM2 Karras 20-30
DPM2 a Karras 20-30

👉 007 :关于图像大小 ?

  • 图像越大,从而需要往图片中加入更多的元素,越容易出现低质量的信息
  • 如果图像大小一样,相同的提示词可能会出现类似的结果,但是大小一旦变化,图像的变化就极大
  • 图像越大,花的时间必然就会越长
  • 总结 : 图像不是越大越好,过大的图像反而影响整体质量。

关于宽度 :

  • 推荐 512 x 512 ,一般模型都是在这个基础上进行计算的
  • 宽带必须是 8 的倍数
  • 宽度不适合太大,容易出现图像崩溃
  • 高度同理

👉 008 :CFG Scale (提示词引导系数 )

  • 控制图像与提示词之间的契合度,这个值越高,生成的图像也越接近你的提示词
  • 这个值一定程度上会降低图像质量,因为相当于限制了范围
  • 建议 7- 15

其他功能补充 :

随机种子的作用

  • 随机种子可以帮助我们锁定图像范围 ,使用相同种子的时候可以生成类似的图像
  • 相同的随机种子可以提高图像的可重复度和相似性,用于调优和优化模型
  • 当使用 -1 随机种子时图像完全随机,完全无规律

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

总结

首篇完成,算是对这段时间学习的一个总结,期望能对大家有所帮助。

学无止境, 这个系列也是一直会保持更新。

写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言
AI 创业指难(一) :Stable Diffusion AI 绘画怎么用,人工智能,stable diffusion,开发语言文章来源地址https://www.toymoban.com/news/detail-853820.html

到了这里,关于AI 创业指难(一) :Stable Diffusion AI 绘画怎么用的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • AI绘画Stable Diffusion进阶使用

    本文讲解,模型底模,VAE美化模型,Lora模型,hypernetwork。 文本Stable Diffusion 简称sd 欢迎关注 C站:https://civitai.com/ huggingface:https://huggingface.co/models?pipeline_tag=text-to-image stable diffusion webui 部署完成后,checkpoint是放底模 homewebuimodels 目录下 常见模式:后缀ckpt/safetensors 常见大小

    2024年01月22日
    浏览(56)
  • AI 绘画 | Stable Diffusion 图生图

    Stable Diffusion 不仅可以文生图,还可以图生图。文生图就是完全用提示词文本去生成我们想要图片,但是很多时候会有词不达意的感觉。就像我们房子装修一样,我们只是通过文字描述很难表达出准确的想要的装修效果,如果能给到一张设计图或者效果图,那么就能更加直白

    2024年02月03日
    浏览(60)
  • stable-diffusion AI 绘画

    git clone https://github.com/CompVis/stable-diffusion.git 进入stable-diffusion目录 在这里注册一个账号: Hugging Face – The AI community building the future. 并生成个token 安装CUDA NVIDIA 安装 CUDA_nvidia cuda_长满头发的程序猿的博客-CSDN博客 pip install torch -f https://download.pytorch.org/whl/torch_stable.html pip insta

    2024年02月13日
    浏览(37)
  • AI绘画:快速上手stable diffusion

    点击↑上方↑蓝色“ 编了个程 ”关注我~ 这是Yasin的第 89 篇原创文章 最近随着Chat GPT的大火,AI绘画也火了起来。尤其是midjourney(以下简称mj),能够通过文本生成AI图片,还能指定各种风格,简直是我们这种又菜又爱玩的福音。 下面是我用mj随便画的一些图: mj上手

    2023年04月22日
    浏览(50)
  • AI 绘画 | Stable Diffusion 提示词

    在Stable Diffusion中,Prompts是控制模型生成图像的关键输入参数。它们是一种文本提示,告诉模型应该生成什么样的图像。 Prompts可以是任何文本输入,包括描述图像的文本,如“一只橘色的短毛猫,坐在草地上,背景是蓝天白云”,也可以是的组合,如“鸟,森林,天空

    2024年01月21日
    浏览(41)
  • 【AI绘画】Stable Diffusion WebUI

    💝💝💝欢迎来到我的博客,很高兴能够在这里和您见面!希望您在这里可以感受到一份轻松愉快的氛围,不仅可以获得有趣的内容和知识,也可以畅所欲言、分享您的想法和见解。 推荐:kuan 的首页,持续学习,不断总结,共同进步,活到老学到老 导航 檀越剑指大厂系列:全面总

    2024年02月08日
    浏览(56)
  • AI 绘画Stable Diffusion 研究(七) 一文读懂 Stable Diffusion 工作原理

    大家好,我是风雨无阻。 本文适合人群: 想要了解AI绘图基本原理的朋友。 对Stable Diffusion AI绘图感兴趣的朋友。 本期内容: Stable Diffusion 能做什么 什么是扩散模型 扩散模型实现原理 Stable Diffusion 潜扩散模型 Stable Diffusion文本如何影响图片生成 Stable Diffusion Cross-attention 技术

    2024年02月13日
    浏览(50)
  • AI绘画 | stable diffusion简介和原理

    Stable Diffusion中文的意思是稳定扩散,本质上是基于AI的图像扩散生成模型。 Stable Diffusion是一个引人注目的深度学习模型,它使用潜在扩散过程来生成图像,允许模型在生成图像时考虑到文本的描述。这个模型的出现引起了广泛的关注和讨论,不仅因为它在技术上的创新,还

    2024年02月05日
    浏览(43)
  • Stable Diffusion 提示词解析|AI绘画

    玩了很久的SD,感觉已经没有一开始的激情了,最近有幸看到了几篇关于提示词的指导文章,突然感觉又发现了新大陆,整理后供大家一起学习。 好的提示词应该包含如下几个模块: Anatomy of a good prompt 解析好的提示词 Subject (required) 主题 Medium 媒介 Style 风格 Artist-Website Art-

    2024年02月01日
    浏览(37)
  • Stable Diffusion AI 绘画入门指南

    市面上用的最多的AI绘画工具是 Stable-Diffusion(SD) 和 Midjourney(Mid) , SD 是在本地运行的服务,开源,门槛高,但 自控性极高 。而 Mid 作为在线的服务,门槛低,效果好,但 可控性不够强 。 Stable Diffusion(简称SD)是当今最流行的免费、开源的AI绘图模型, 可以在电脑本地

    2024年02月13日
    浏览(60)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包