AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由

这篇具有很好参考价值的文章主要介绍了AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

文章回顾

AI 绘画(0):导论

AI 绘画(1):生成一个图片的标准流程

感谢人员

  • 秋葉aaaki

    • B站菩萨,Ai界观音。免费整合了Ai绘画,还有配套的启动器。
      AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
  • 陈二哈是个技术宅

    • B站AI绅士,Ai传道士。提供了系统性的Ai教程
      AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
  • B站第一套系统的AI绘画课!零基础学会Stable Diffusion

    • B站绘画设计师,积极拥抱ai技术,也提出了系统性的教程
      AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

题外话

其实我这个人只要感兴趣就什么都学。2023年4月买了台新的台式机,就想着弄一下Ai绘画。发博客第一是为了防止自己忘记,第二是为了分享,大家的阅读,点赞,评论多了我也有成就感。上篇文章突然就火了,粉丝一下子从12涨到快500了。不知道是大家喜欢Ai绘画还是因为坤坤的魅力。我现在是受宠若惊啊。

刚好我配电脑整了个4070Ti的显卡,买了电脑也不能让他天天摸鱼,最近打算弄一下Ai绘画的相关的全部整一遍。作为ikun,我要教大家怎么制作自己的赛博坤坤

大家学会了Ai绘画不要用来干坏事哦!

Ai绘画公约

  • 不利用Ai技术诈骗,传播虚假,不良信息
  • 不煽动矛盾,仇恨
  • 不侵害他人利益
  • 请在显著位置标注生成信息为Ai制作。

Ai模型训练

硬件要求

从本章开始,对GPU性能要求会越来越高。除了是N系的显卡,还有对于配置的要求。

显存设置

查看显存大小

根据我的实际运行结果,显存要8G差不多。我每次跑显存都要占8G多一点,8.2,8.3左右。推荐是12G显存,显存太小就要降低训练的分辨率

打开任务管理器

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

如果你显存过小,可能无法训练成功,或者程序崩溃。

需要改小训练图片大小。

我不太清楚,但是我专用内存也够12G了。有没有懂哥在评论区里面说一下

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

显存过小解决方法

可以在启动器里面将显存进行优化。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

视频教程

【AI绘画教程】实现老婆自由⚡️embedding角色模型训练极简教程⚡️保姆级教学文章来源地址https://www.toymoban.com/news/detail-701791.html

由up主提供
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

前期准备

如果没下软件的话,可以在这里下载

软件下载

Stable Diffusion整合包v4发布!全新加速 解压即用 防爆显存

SD配置设置

Tips:根据我测试,必须下载完整版。
Tips:根据我测试,必须下载完整版。
Tips:根据我测试,必须下载完整版。
Tips:根据我测试,必须下载完整版。
Tips:根据我测试,必须下载完整版。

下载好了之后,将模型切换为完整版SD。不然后面会渲染出鬼图!

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

大小为7G就是完整版SD

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

如果不能科学上网,或者下载速度极其慢。可以使用二哈给的百度网盘地址

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

百度:
链接:https://pan.baidu.com/s/1xaiKchmXdijD-WvZ3JW2-w?pwd=erha 
提取码:erha

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

如果你百度网盘没会员,下载得贼慢。那只能自己想办法了。

SD设置配置

注意,我上文提供的软件已经默认配置好了。如果下载是我提供的软件不需要配置。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

SD训练配置pt生成

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
必须要英文路径

训练集收集

Tips:训练集收集有版权相关问题,请不要将训练好的模型拿来商用,请遵守AI绘画公约。

训练集要求
  • 图片为正方形
  • 背景不能太花
  • 不能有文字或者符号
  • 绘画风格要统一
截图软件推荐

由于我们需要截取大量的正方形图片,我们可以下载picpick软件

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

按下对应快捷键,我这里是Alt+Q。然后点击右键 对固定区域大小进行设置。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

到对应的文件夹下查看,我这里已经截取成功了
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练集版权声明

请注意图片版权,由于版权原因,我这里就不放坤坤的美照了,我怕律师函 。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

真人 动漫
版权 更容易触发版权问题,因为真人模型即肖像权,属于个人权利 版权问题较小,处于灰色地带,请勿商用
训练量 真人需要更多的训练集,我感觉至少100张以上 50张左右即可,不建议低于20张

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

一键重命名图片

全选文件,重命名,文件就批量重命名了。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练图片来源

训练量推荐50张,至少20张

这里推荐花瓣网上搜索图片

花瓣网官网

如果图片不好搜,我们可以自己生成一批图片,自己抄自己

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
我这里就用原神的可莉 作为训练的素材

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

批量修改图片尺寸
  • 一般建议512X512
  • 如果显卡性能不高,则设置成300X300

python代码

from PIL import Image
import os
import glob

path = 'E:/Picpick_files/klee' # 设置为你的文件路径
savePath = path +"_"
imgPath = path+"/*.png"
for i in glob.glob(imgPath):
  im1 = Image.open(i)
  im2 = im1.resize((512,512))
  im2.save(os.path.join(savePath,os.path.basename(i)))
  print('正在生成:',i)
print('finish')

在vscode里面运行

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

开始训练

这里我已经准备好了训练集

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

导入训练集,图片预处理

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

文件路径

  • train
    • SD_角色名
      • SD_角色名_in:用于存放原始文件,训练集放这里
      • SD_角色名_out:用于存放输出文件

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

点击预处理,过程会比较漫长,这个要看你的显卡的性能

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

创建成功

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

我们打开提示词看看
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

pointy_ears, klee_\(genshin_impact\), hat, red_headwear, open_mouth, red_dress, twintails, long_hair, low_twintails, hat_feather, red_eyes, dress, bag, blurry

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

里面有klee_(genshin_impact) 看来可莉已经被打成标签了。
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

开始嵌入式训练

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

【AI绘画教程】实现老婆自由⚡️embedding角色模型训练极简教程⚡️保姆级教学 视频时间 07:13

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

生成不出来可以将提示词模版改成style_filewords。这里很容易出鬼图

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练模型特别花时间,开始训练之后就可以先去睡觉了

我们可以看到显存占用的还是比较多的

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练完成

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练出鬼图如何解决

有时候会训练出一些奇怪的图片,甚至会训练坏掉,生成的都是杂波,像老式电视机没信号一样。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

确定SD是否为7G完整版

SD一定是7G完整版。怎么下完整版我前面说过。我试过别的版本,好像都容易出鬼图。

如果没坏掉,反复训练

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

  • style_filewords
    • 画风提示词
  • subject_filewords
    • 人物提示词

我们先画风,再人物。即style再subject为一个循环。重复2~3次循环。

就是非常的费时间。建议上班的时候远程自己的电脑练丹。

如果坏掉了,覆盖模型,重新生成

Tips:重新生成嵌入式模型
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练结果测试

重启前端

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
训练结果差不多,但是有很多文字,我不知道咋回事

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练成功之后,将模型预览图添加上去

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

训练结果要求

  • 只能输入一个单词,即嵌入式模型单词。
  • 能看出大致人物是该角色即可
  • 不能有文字大量出现

如何使用

去C站抄作业

国内C站网址
国外C站网址

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

我抄作业的地址

prompt:fisheye lens, up view, 1girl, wear Chinese hanfu, lively posture, facing the audience, black lone hair, anime character on her back flying a big green cyan wood dragon::2 , trees and leafs skills and effect:1, in the style of light cyan and white, battle pose, dynamic movement, dynamic pose, laser, full of imagination, unmatched composition ultra-detailed super high quality
Negative prompt:EasyNegativeV2, ng_deepnegative_v1_75t, (low_quality:1.4), (worst_quality:1.4), (badhandv4:1.1),collage, artist_name, signature, artist_logo, watermark,
Sampler:DPM++ 2M Karras
model:小人书·连环画  xiaorenshu
CFG scale:0
steps:28
seed:

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

提示词权重

我们训练的模型在多提示词之后,角色特点会降低。我们可以增加提示词权重。

(提示词:x),x就是权重

以"1gril"为例

  • x= 1。(1girl:1) == 1girl
  • x< 1。1gril权重降低
  • x>1。1girl权重增加。

一般来说,我们都是小数点后慢慢加

  • 0.8:稍微
  • 1.0:正常
  • 1.2:重要
  • 1.4:特别重要
  • 2:必须满足,一定要满足,最高上限

提示词一般不超过2。

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

Tips:个人推荐权重不超过1.5。1.3的效果最好
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画

保存和分享

完成模型之后进入程序根目录

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
这些是我们的模型

AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
将训练好的模型保存进去
AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由,人工智能,Ai绘画
如果分享,将该文件给别人,别人导入到embeddings 文件夹即可。

结尾

如果AI模型训练有问题,请完全按照up主陈二哈是个技术宅的视频来。

从SDweb 和SD 模型。完全按照他的流程

【AI绘画教程】实现老婆自由⚡️embedding角色模型训练极简教程⚡️保姆级教学

Ai绘画公约

  • 不利用Ai技术诈骗,传播虚假,不良信息
  • 不煽动矛盾,仇恨
  • 不侵害他人利益
  • 请在显著位置标注生成信息为Ai制作。

到了这里,关于AI 绘画(2):Ai模型训练,Embedding模型,实现“人物模型“自由的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 原神盲盒风格:AI绘画Stable Diffusion原神人物公仔实操:核心tag+lora模型汇总

    本教程收集于:AIGC从入门到精通教程汇总 在这篇文章中,我们将深入探讨原神盲盒的艺术风格,以及如何运用AI绘画技术(Stable Diffusion)——来创造原神角色公仔。我们将通过实践操作让读者更好地理解这种技术,以及如何利用关键标签和Lora模型来优化生成的结果。 原神作

    2024年02月16日
    浏览(46)
  • AI绘画中CLIP文本-图像预训练模型

    OpenAI 在 2021 年提出了 CLIP(Contrastive Language–Image Pretraining)算法,这是一个先进的机器学习模型,旨在理解和解释图像和文本之间的关系。CLIP 的核心思想是通过大规模的图像和文本对进行训练,学习图像内容与自然语言描述之间的对应关系。这种方法使得模型能够在没有特

    2024年02月03日
    浏览(41)
  • Ai 算法之Transformer 模型的实现: 一 、Input Embedding模块和Positional Embedding模块的实现

    比较常见的文章生成模型有以下几种: RNN:循环神经网络。可以处理长度变化的序列数据,比如自然语言文本。RNN通过隐藏层中的循环结构来传递时间序列中的信息,从而使当前的计算可以参照之前的信息。但这种模型有梯度爆炸和梯度消失的风险,所以只能做简单的生成任

    2024年01月23日
    浏览(37)
  • 【AI之路】使用Jan.ai在本地部署大模型开启AI对话(含通过huggingface下载大模型,实现大模型自由)

    2023年是AIGC元年。以后,每个人多少都会接触到GPT带来的变化。别人都在用,我们也不能落下。ChatGPT咱用不了,可以用国内的各种大模型。另外,我们还可以把大模型放到本地电脑上运行,不信?咱往下看! 使用Jan.ai在本地调用大模型进行对话 下面就让我们的主角登场。

    2024年02月02日
    浏览(64)
  • 艺术创作的新纪元:如何训练Lora模型打造令人惊叹的AI绘画

    在数字时代的今天,人工智能(AI)技术正不断改变着我们的生活,也给艺术领域带来了前所未有的革新。AI绘画模型,作为其中的一颗明星,让计算机能够像艺术家一样创作绘画作品,引发了广泛关注。然而,AI绘画模型的训练对计算资源和时间的要求较高,这对于大部分人

    2024年02月13日
    浏览(43)
  • AI 绘画Stable Diffusion 研究(十五)SD Embedding详解

    大家好,我是风雨无阻。 本期内容: Embedding是什么? Embedding有什么作用? Embedding如何下载安装? 如何使用Embedding? 大家还记得 AI 绘画Stable Diffusion 研究(七) 一文读懂 Stable Diffusion 工作原理 这篇文章中,曾提到过词嵌入(Embedding)吗? 我们来简单回顾一下:Embedding 将输

    2024年02月11日
    浏览(38)
  • AI 语音 - 人物音色训练

    前情提要 2023-07-02 周日 杭州 阴晴不定 AI 入门三大项,AI 绘画基础学习,AI 语音合成,AI 智能对话训练,进入 AI 语音合成阶段了,搓搓小手很激动的,对于一个五音不全的我来说,这个简直了(摆脱了低级趣味,保留点好色就够了); ** 时间线 ** a. 2021 年函数计算编程大赛;

    2024年02月12日
    浏览(35)
  • 【AI绘画】《超入门级教程:训练自己的LORA模型》,MM超爱的萌宠图片实战

    SD-Trainer:是stable diffusion进行lora训练的webui,有了SD-Trainer,只需要少许图片,每个人都能够方便快捷地训练出属于自 己的stable diffusion模型,可以让图片按照你的想法进行呈现。 SD-Trainer :是stable diffusion进行lora训练的webui,有了SD-Trainer,只需要少许图片,每个人都能够方便快

    2024年02月14日
    浏览(42)
  • 今天教教你怎么一键ai绘画卡通人物

    两个朋友坐在咖啡馆里,他们正在热烈地讨论着最新的科技趋势。约翰一脸兴奋地对他的朋友大卫说道:“你听说过一键ai绘画卡通人物吗?这是最近在艺术界掀起了轩然大波的新技术!” 大卫好奇地抬起眉毛:“一键ai绘画卡通人物?听起来相当有趣!你能告诉我更多关于

    2024年02月16日
    浏览(42)
  • AI绘画人物(头像)设计提示词大全(持续更新)

            当设置人物头像时,以下是每个类别的一些详细列表,可以帮助您更准确地描述您想要的特征。 本文将长期进行更新,欢迎关注。文中所涉及的内容也可在RdFast智能创作机器人小程序中即刻进行体验,包括AI素材、AI文案、AI编辑、AI绘画、AI室内设计和AI头

    2024年01月17日
    浏览(42)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包