stable diffusion模型初尝试

这篇具有很好参考价值的文章主要介绍了stable diffusion模型初尝试。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

文章目录

  • 前言
  • 一、

    目录

    文章目录

    前言

    一、stable diffusion - webUI的下载安装以及配置

    二、模型训练


前言

刚开始尝试基于stable diffusion跑模型,试着做一些小项目,网上能查到的资料着实有限,部分甚至需要科学上网,这里记录我找到的部分资料以及安装方法,大家斧正,刀正,锤子正o.0¥

一、stable diffusion - webUI的下载安装以及配置

具体参考

AI - stable-diffusion(AI绘画)的搭建与使用_GitLqr的博客-CSDN博客

注意:下载时可能有部分安装包比较大(比如有一个包4G),在终端安装速度极慢,可尝试在网页找到网址打开下载(速度会快很多),下载完后剪切到相应文件夹即可(网址和安装文件均可在终端看到)

二、开始跑一个小模型

具体参考

Stable Diffusion模型訓練教學 (Textual Inversion、HyperNetwork、LoRA) | Ivon的部落格 (ivonblog.com)

 文章里用的是SD webUI,我们在上面下载配置的stable diffusion - webUI也完全具有相同功能,这里分享一下我现在跑模型的过程

1、对资源图片进行预处理

先在网上找到图片资源,我这里就找了10张,由于我们进行图片与处理时对图片长宽有要求,这里默认下载的是512*512,如果图片不是这个比例,具体编辑过程可以参考上面文档教程,这里提供一个壁纸网站可以自定义下载特定比例的图片

Awesome Wallpapers - wallhaven.cc

在stable diffusion - webUI里找到Train-Preprocess images

source directory填上你资源图片的绝对路径,另外新建一个输出文件夹inputdata并将绝对路径填在Distination directory

stable diffusion模型初尝试,机器学习,stable diffusion,ai

stable diffusion模型初尝试,机器学习,stable diffusion,ai

接著勾選Create Flipped Copies,建立翻轉圖片提升訓練數量。然後用Stable Diffusion訓練真實圖片的勾選Use BLIP for caption;訓練動漫人物改勾選Use DeepBooru for caption

點選Preprocess,約幾分鐘後便會處理完成。輸出的目錄裡面會含有每張圖片對應的提示詞txt檔。至此訓練資料準備完成。

(上面直接ctrl C V的,懒得打了,具体内容在本段最开始的网站里0ω0)

注意此处如果是第一次使用,点击preprocess后会下载一个600+M的包,下载较慢,用浏览器打开也没办法,大概十几二十分钟,网速在100KB到2MB不等。不要用梯子下载(巨巨巨巨慢)!!!!!

下载完后在inputdata里可以看到每张图片及其对应的提示词

stable diffusion模型初尝试,机器学习,stable diffusion,ai

2、准备跑hypernetwork模型

首先创建一个hypernetwork,输入模型名称就好,点击create

stable diffusion模型初尝试,机器学习,stable diffusion,ai

stable diffusion模型初尝试,机器学习,stable diffusion,ai

这里我计算机GPU不够用了。文章来源地址https://www.toymoban.com/news/detail-518259.html

到了这里,关于stable diffusion模型初尝试的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【AI项目实战】某语言模型-stable diffusion-vits-cqhttp 实现能对话能语音能绘画的Q群机器人

    好久没写文章了,终于想起来我有个博客账号系列。。 项目已开源在github上。 文章已滤敏,一切涉及语言模型名字的内容都以某语言模型代替 提示:AI绘画部分建议6G显存以上。 用于接收群友消息,并回复消息。 基于这种对话式的语言模型,可以对用户的聊天进行响应。

    2024年02月10日
    浏览(30)
  • AI 作画:Stable Diffusion 模型原理与实践

    本文首先简单介绍 Stable Diffusion 模型结构 Latent Diffusion 的论文和博客,然后介绍模型的训练和推理技术细节(不含数学推导),接着介绍几个 prompt 搜索引擎等实用工具,最后简单介绍 AI 作画(图像生成)的发展史,并测试了 Stable Diffusion 不同风格和 prompt 的生成样例。 Mod

    2024年02月10日
    浏览(41)
  • 机器学习笔记:李宏毅 stable diffusion

     ①:文字变成向量  ②:喂入噪声+文字encoder,产生中间产物  ③:decoder 还原图片  这张图越往右下表示效果越好,可以看到text encoder尺寸越大,对后续生成图片的增益越多  现有一个训练好的CNN 模型,可以生成真实影像和生成图像的representation 这两组表征的分布越近,效

    2024年02月13日
    浏览(41)
  • AI文本生图模型Stable Diffusion部分模型叠加效果

    兄弟们,最近有个烦恼,就是找图有点费事,干脆自己部署个文本生图模型Stable Diffusion,虽然机器性能慢,但是效果还可以,先和大家截图分享下,后面将映射ai.shenjian.online供大家免费使用 1. 效果预览 2. 主模型及插件安装 下载模型icerealistic_v21.safetensors放到./models/Stable-diffusion/下 下载

    2024年01月20日
    浏览(30)
  • 重磅!Stable Diffusion 3 发布,AI模型百花争鸣!

    击上方关注 “ 终端研发部 ” 最近AI大变天! 刚火了Sora,又火了Gemma,这不stable diffusion又来了!大语言模型成了龙争虎斗的年代已开启~ Stable Diffusion 3到底是什么? 用官方的描述,3.0版本核心功能是多主题提示、图像质量和拼写能力。 比如给出提示词:厨房的桌子上放着一

    2024年03月13日
    浏览(48)
  • AI绘画Stable Diffusion原理之扩散模型DDPM

    传送门: stable diffusion:Git|论文 stable-diffusion-webui:Git Google Colab Notebook部署stable-diffusion-webui:Git kaggle Notebook部署stable-diffusion-webui:Git AI绘画,输入一段文本就能生成相关的图像,stable diffusion便是其中一个重要分支。自己对其中的原理比较感兴趣,因此开启这个系列的文章

    2024年02月03日
    浏览(33)
  • Stable Diffusion使用civitai的模型进行AI绘图

    准备工作 1.安装Stable Diffusion(B站秋叶大佬有完整包,开箱即用) 2.启动之后找到图中位置下载civitai助手 下载完成之后,点击页面下方“重载客户端”。 下载模型 1.进入C站,随便找一个点进去,复制浏览器的网址 2.找到图中的tab,如果没有,说明civitai没有安装成功  按照图

    2024年02月11日
    浏览(32)
  • 简单尝试:ChatGLM-6B + Stable diffusion管道连接

    1. 抛去算法设计方面,仅从工程角度考虑的话,Stable diffusion的潜力挖掘几乎完全受输入文字影响。 2. BLIP2所代表的一类多模态模型走的路线是\\\"扩展赋能LLM模型\\\",思路简单清晰,收益明显。LLM + Stable diffusion的问题应该也不大。 3. ChatGLM-6B 和 Stable diffusion都有huggingface中的pipe

    2024年02月09日
    浏览(22)
  • AI 绘画 stable diffusion webui 常见模型汇总及简介

    主要是记录索引一下常见的 AI 绘画作画模型,方便自己用。主要收集 stable diffusion webui 用大模型(ckpt与safetensors)包括了常见的模型比如的Waifu Diffusion、anything、f222、basil mix、urpm 、chillout mix等模型。 Lora(人物卡模型)和hypernetworks(embedding和hypernetwork)暂时不打算广泛搜集

    2024年02月02日
    浏览(45)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包