Stable Diffusion(SD) Lora模型

8月前作者：qq_49326297 分类：Toy博客阅读(42) 违法举报

这篇具有很好参考价值的文章主要介绍了Stable Diffusion(SD) Lora模型。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

1. Lora模型tag

1.1 打tag路径

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

1.2 打tag准备

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion 还有一个重要的点，就是你想固化的特征不要去打tag，打的tag不是单纯的对图片进行描述，还要考虑到是否是变量， tag尽量都是变量，也就是说是你期望模型生成的时候可以根据你的文字改变的。举个例子，一个红头发女孩，如果tag里面有red hair，AI会认为这个是可变量，后面模型生成的时候你输入white hair就可以生成白发女孩，但如果tag里面没有red hair，AI会认为红发是这个女孩的本身特征是固定的，即使模型后面输入white hair，生成的女孩也只会是红发不会变白发。

如何从零开始训练一个高质量的LoRA模型 - 哔哩哔哩 (bilibili.com)

参考这篇博客对于tag部分的说明。所以总而言之，tag是变量，是未来想灵活调整的可以被替换的内容，如果不想被替换的就不要写。
————————————————
版权声明：本文为CSDN博主「不学能干嘛」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/m0_59805198/article/details/135070297

1.3 分类进行打tag

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

视频：lora训练教程

2. Lora模型训练核心参数

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.1 步数相关 repeat / epoch / batch_size

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.1.1 image训练集tag文本

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.1.2 repeat

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.1.3 epoch

epoch多轮次比单轮次要好，通过设置可以每轮保存一组模型，多轮次说明有多组模型，得到好概率的可能是比单轮次就一个模型的概率是要高的，epoch一般设置5~10；
epoch=repeat*图片数量

2.1.4 batch_size

取决硬件
同一时间学习几张图片
收敛;AI最终出来的图片跟你的原图有多像，原图越像，收敛越好
batch_size加大，收敛越慢
batch_size要是高，一是可能显存带不动，二是值越高训练越快越可能学得囫囵吞枣收敛得慢。
BS从1到2，Ir就要*2

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.1.5 total optimization steps(总训练步数)

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.2 速率/质量相关 Ir学习率 / Dim网络维度 / Optimizer优化器

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.2.1 学习率

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

2.2.2 Network dimension(Dim网络维度)

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion ### 2.2.3 Optimizer(优化器)

3. 参数和模型之间的联动关系

3.1 只调整repeat

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

3.2 只调整repeat和epoches

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

3.3 只调整学习率

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion

4. 新手参数建议

Stable Diffusion(SD) Lora模型,Stable diffusion,stable diffusion 文章来源地址https://www.toymoban.com/news/detail-788356.html

到了这里，关于Stable Diffusion(SD) Lora模型的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

AI 绘画Stable Diffusion 研究（十七）SD lora 详解（上）

大家好，我是风雨无阻。本期内容： Lora的原理是什么？ Lora如何下载安装？ Lora如何使用？大家还记得 AI 绘画Stable Diffusion 研究（三）sd模型种类介绍及安装使用详解这篇文章中，曾简单介绍了Lora的安装和使用吗？但是我们并不清楚LORA 的原理是什么？以及使用过程中有什

2024年02月10日
浏览(28)
Stable Diffusion训练Lora模型

以下内容参考:https://www.bilibili.com/video/BV1Qk4y1E7nv/?spm_id_from=333.337.search-card.all.clickvd_source=3969f30b089463e19db0cc5e8fe4583a 第一步，准备训练要使用的图片，即优质的图片第二部，为这些图片打标，即精准的tag 数量建议20-50张，最多100张图片不好的图片：模糊的，动作扭曲的，脸部被

2024年02月12日
浏览(50)
[Stable Diffusion]ip-adapter：SD也可以垫图了，一张图复刻lora效果

Controlnet更新的v1.1.4版本新预处理ip-adapter，这项新能力简直让stablediffusion的实用性再上一个台阶。这些更新将改变sd的使用流程。 ip-adapter是腾讯Ai工作室发布的一个controlnet模型，可以通过stable diffusion的webui使用，这个新的功能简单来说，他可以识别参考图的艺术风格和内容

2024年02月04日
浏览(34)
LoRa模型训练教程（炼丹，Stable Diffusion）

何为LoRA？LoRA并不是扩散模型专有的技术，而是从隔壁语言模型（LLM）迁移过来的，旨在解决避免将整个模型参数拷贝下来才能对模型进行调校的问题。因为大型语言模型的参数量过于恐怖，比如最近新出的GPT-4参数量约为100 万亿。 LoRA采用的方式是向原有的模型中插入新的数

2024年02月10日
浏览(30)
Stable Diffusion Lora模型训练详细教程

通过Lora小模型可以控制很多特定场景的内容生成。但是那些模型是别人训练好的，你肯定很好奇，我也想训练一个自己的专属模型（也叫炼丹～_～）。甚至可以训练一个专属家庭版的模型（family model），非常有意思。将自己的训练好的Lora模型放到stableDiffusion lora 目录中，

2024年02月02日
浏览(36)
stable diffusion实践操作-常见lora模型介绍

本文专门开一节写Lora相关的内容，在看之前，可以同步关注： stable diffusion实践操作 Lora是微调模型，某品牌汽车（特斯拉），人物姿势（剪刀手），可以固定我们照片的特征：人物特征、动作特征、还有照片风格。如果把基础模型比喻作一座房子的地基，那么Lora模型就好比

2024年02月10日
浏览(32)
stable diffusion打造自己专属的LORA模型

通过Lora小模型可以控制很多特定场景的内容生成。但是那些模型是别人训练好的，你肯定很好奇，我也想训练一个自己的专属模型（也叫炼丹～_～）。甚至可以训练一个专属家庭版的模型（family model），非常有意思。将自己的训练好的Lora模型放到stableDiffusion lora 目录中，

2023年04月09日
浏览(68)
炼丹！训练 stable diffusion 来生成LoRA定制模型

LoRA，英文全称Low-Rank Adaptation of Large Language Models，直译为大语言模型的低阶适应，这是微软的研究人员为了解决大语言模型微调而开发的一项技术。比如，GPT-3有1750亿参数，为了让它能干特定领域的活儿，需要做微调，但是如果直接对GPT-3做微调，成本太高太麻烦了。 LoRA的

2024年03月27日
浏览(38)
Stable Diffusion 指定模型人物，Lora 训练全流程

在使用 Stable Diffusion 的时候，可以选择别人训练好的 Lora，那么如何训练自己的 Lora，本篇文章介绍了介绍了如何训练Lora，如何从训练的模型中选择好的模型，如何在 Stable Diffusion 中使用。闲话不多说，直接实际操作吧，干货满满，记得关注哦，以免找不到了。首先我们来获

2024年02月09日
浏览(46)
【 stable diffusion LORA模型训练最全最详细教程】

个人网站：https://tianfeng.space/ 其实想写LORA模型训练很久了，一直没时间，总结一下现在主流的两种LORA模型训练方式，分别是朱尼酱的赛博丹炉和秋叶大佬的训练脚本，训练效果应该是赛博丹炉更好，我个人更推荐朱尼酱的赛博丹炉，界面炫酷，操作简单，作者也是花了很多

2024年02月09日
浏览(38)