MacOS-use-Stable-Diffusion

这篇具有很好参考价值的文章主要介绍了MacOS-use-Stable-Diffusion。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

  • 导航 (返回顶部)
1. Stable Diffusion
1.1 用法和争议
1.2 许可证
1.3 不可控性
1.4 一点想法
1.5 用途
1.6 教程链接
2. Setup
2.1 Draw Things
2.2 diffusionbee
2.3 AUTOMATIC1111
3. Models
3.1 模型名词
3.2 模型下载
3.3. 中文详解链接
4. Prompts

1. Stable Diffusion

https://zh.wikipedia.org/zh-cn/Stable_Diffusion
https://en.wikipedia.org/wiki/Stable_Diffusion
https://github.com/Stability-AI/stablediffusion
https://stability.ai/
https://github.com/CompVis/stable-diffusion
Stable Diffusion是2022年发布的深度学习文本到图像生成模型。
它主要用于根据文本的描述产生详细图像,尽管它也可以应用于其他任务,如内补绘制、外补绘制,以及在提示词​(英语)指导下产生图生图的翻译。
它是一种潜在​扩散模型,由慕尼黑大学的CompVis研究团体开发的各种生成性人工神經网络。
它是由初创公司StabilityAI,CompVis与Runway合作开发的,并得到EleutherAI和LAION​(英语)的支持。
Stable Diffusion的代码和模型权重已公开发布,可以在大多数配备有适度GPU的电脑硬件上运行。
而以前的专有文生图模型(如DALL-E和Midjourney)只能通过云计算服务访问。

1.1 用法和争议

Stable Diffusion 对生成的图像不主张任何权利,并免费授予用户使用模型生成的任何图像的权利,前提是图像内容不违法或对个人有害。
为用户提供的图像使用自由引发了所有权伦理方面的争议,因为 Stable Diffusion 和其他生成模型是在未经所有者同意的情况下从受版权保护的图像中训练出来的。
由于视觉风格和构图不受版权保护,因此通常认为生成艺术作品图像的 Stable Diffusion 用户不应被视为侵犯视觉相似作品的版权。
然而, 如果使用他们的肖像,生成的图像中描绘的个人可能会受到人格权的保护, 和知识产权例如可识别的品牌标识仍然受版权保护。
尽管如此,视觉艺术家表示担心,Stable Diffusion 等图像合成软件的广泛使用可能最终会导致人类艺术家以及摄影师、模特、电影摄影师和演员逐渐失去与基于 AI 的竞争对手的商业可行性。
与基于生成式 AI 的其他商业产品相比,Stable Diffusion 在用户可能生成的内容类型方面明显更加宽容,例如暴力或色情图像。
针对该模型可能被用于滥用目的的担忧,Stability AI 的首席执行官 Emad Mostaque 解释说,“[这是]人们的责任,即他们如何操作这个模型是否符合伦理、道德和法律技术”,并且将稳定扩散的能力交到公众手中将导致该技术提供净收益,尽管存在潜在的负面后果。
此外,Mostaque 认为,Stable Diffusion 的开放可用性背后的意图是结束企业对此类技术的控制和支配,这些技术以前只开发了用于图像合成的封闭人工智能系统。
这反映在以下事实中:由于源代码的可用性,Stability AI 对用户可能生成的内容施加的任何限制都可以很容易地被绕过。

1.2 许可证

与DALL-E等模型不同,Stable Diffusion 提供其源代码以及模型(预训练权重)。
它将 Creative ML OpenRAIL-M 许可证(一种 Responsible AI License (RAIL) 形式)应用于模型 (M)。
该许可证禁止某些用例,包括犯罪、诽谤、骚扰、人肉搜索、“剥削……未成年人”、提供医疗建议、自动产生法律义务、提供法律证据,以及“歧视或伤害个人或团体基于关于……社会行为或……个人或人格特征……[或]受法律保护的特征或类别”。
用户拥有其生成的输出图像的权利,并且可以自由地在商业上使用它们。

1.3 不可控性

  • 使用photoshop,blender等软件制作图片,模型的过程是使用各种工具,命令的过程,是可控的过程。
  • 使用ChatGPT,Stable-Diffusion等深度学习AI为基础的软件生成内容,仅使用期望的关键字即可生成,没有中间过程,结果不可控。
因此有2个特点
  • 无论如何都会出图。比如,使用极简关键字“white paper”,或者使用100个单词的详细描述,或者多个单词内容互相矛盾,或者有错字,都可以生成图片。而且使用大致相同的时间。
  • 出图结果概率。可能是惊喜,惊吓,搞笑,反胃,无语... 

1.4 一点想法

全新的许可,内容还比较模糊,本身也有争议的部分。软件可以自由使用,越来越多的人使用,产出越来越多的假照片,假新闻。即使是触法,由于人多,不完整的法会更加无能为力。
ChatGPT更能高效制造真假新闻,话题,AI不断的生成假照片。新一代的AI再基于大量的假信息假照片训练学习,制造更多的假信息,假图片,恶性循环。
应该被关在笼子里科技,在监管下使用,类似可用于药物的毒品。
若AI生成图片,尽能通过某些经过认证的网页生成。且需要注册为用户。生成的图片可以不受限制,但会在服务器上保留备份,或可避免被大量滥用。
年初,国内也发出研发自己的聊天AI,但想象不到会如何发展。因为很多词语是不可说的,记得有几次发布博客文,包含了 开源vpn的名称,就不能发布了,一定要改了才行。 ChatGPT刚出来闹笑话,国内的怕是要闹尴尬了...

1.5 用途

商用恐涉及侵权,除了造假,貌似没有什么好的实际用途。
对于普通用户,充其量就是个热门玩具。
当盲盒游戏玩,有不可确定的输出(惊喜,惊吓,搞笑...)。
或者,使用类似如下的简单描述,每次输出都修改种子后再算图,得到一张你喜欢的图片, 然后使用这个种子seed,修改年龄,从3岁到90岁,步进3,出30张图,耗时1小时(当前m1芯片的MacBook Air出1张图大约100妙).  算出同一seed,同样的提示词,不同年龄的人。从可爱如小嫩芽,到美丽如花朵,再到衰落... 
a female, ((25 years old)), High detail RAW color photo professional, highly detailed face: 1.4, detailed full body portrait, detailed skin, beauty, beautiful, perfect body, walking to camera, bokeh,
或许真正的用途是系统收集大量用户喜好,为未来AI理解人类视角,人类审美,更拟真的模仿人类作的准备。

1.6 教程链接

openai中文指南
https://openai.wiki/
包含ChatGPT,Stable Diffusion等各种AI技术的中文网站。 
【Stable Diffusion】ControlNet 详解篇
https://zhuanlan.zhihu.com/p/619721909
Stable Diffusion 新手入门手册
https://zhuanlan.zhihu.com/p/619120794
https://github.com/AUTOMATIC1111/stable-diffusion-webui
https://github.com/AUTOMATIC1111/stable-diffusion-webui/wiki/Installation-on-Apple-Silicon
https://stable-diffusion-art.com/install-mac/

2. Setup

2.1 Draw Things

https://drawthings.ai/
基于流行的 Stable Diffusion 模型,Draw Things 可帮助您在几分钟而不是几天内创建您心中的图像。 它是免费的,在您的设备上 100% 离线运行所有内容以保护您的隐私。
Draw Things 可以在M1,M2的苹果笔记本上运行。
目前最新版已经支持中文了,但中文提示词还不行,或许是我不会用。对于中文提示词也没找到可参考的网站。
Models路径: 
/Users/tom/Library/Containers/com.liuliu.draw-things/Data/Documents/Models

2.2 diffusionbee

不推荐,功能过于简单,很多流行的模型不被支持。
https://diffusionbee.com/
https://github.com/divamgupta/diffusionbee-stable-diffusion-ui
 % brew search diffusion
 % brew install diffusionbee
 % brew uninstall diffusionbee
 % brew info diffusionbee
… ==> Analytics install: 2 (30 days), 136 (90 days), 1,523 (365 days)
Models路径: 
访达界面,打开用户目录,使用快捷键(command + shift + period)显示隐藏文件,就能看到隐藏的模型文件夹了。
/Users/tom/.diffusionbee/downloads 
/Users/tom/.diffusionbee/custom_models

2.3 AUTOMATIC1111

https://github.com/AUTOMATIC1111/stable-diffusion-webui/wiki/Installation-on-Apple-Silicon
Models路径
/Users/tom/stable-diffusion-webui/models
/Users/tom/stable-diffusion-webui/models/Stable-diffusion

3. Models

3.1 模型名词

  • Models: 模型资料库
  • LoRA: 微调, 特定风格,某些情有独钟的pose
  • Control: 姿态控制等

3.2 模型下载

https://civitai.com/
https://huggingface.co/models?sort=likes

3.3 中文详解链接

Stable Diffusion爱好者常说的LoRa是什么?
https://zhuanlan.zhihu.com/p/610031713
LoRA: Low-Rank Adaptation of Large Language Models 直译为大语言模型的低阶适应.  这是微软的研究人员为了解决大语言模型微调而开发的一项技术。
【Stable Diffusion】ControlNet 详解篇
https://zhuanlan.zhihu.com/p/619721909
女模特总是不配合?用它!游戏原画没灵感?也用它!建筑绘画各行各业设计都用它!它就是 ControlNet ! 只需简单调整参数就能产出无限创作灵感,提高我们的创作效率! 这款 SD 插件已成为了AI 绘画领域最新的热点。 而它的出现代表着 AI 生成开始进入真正可控的时期,而 AIGC 的可控性是它进入实际生产最关键的一环。 在此之前,大家用了很多方法想让 AI 生成的结果尽可能符合要求,但都不尽如人意, ControlNet 比之前 img2img 要更加精准和有效,可以直接提取画面的构图,人物的姿势和画面的深度信息等等。 有了它的帮助,就不用频繁用提示词来碰运气抽卡式创作了。
万字长文解读Stable Diffusion的核心插件—ControlNet
https://blog.csdn.net/xian0710830114/article/details/129194419

4. Prompts

提示词网页, 安装好后,下载了最火的模型,参考下面这些网页的美图提示词试试吧。
https://stablediffusionweb.com/prompts
https://arthub.ai/
https://www.prompttool.com/NovelAI
https://lexica.art/
https://unicode.org/emoji/charts/full-emoji-list.html#1f604

文章来源地址https://www.toymoban.com/news/detail-483979.html

到了这里,关于MacOS-use-Stable-Diffusion的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Macos上国内代理安装Stable-diffusion-webui

         本文是指导开发者快速的搭建Stable-diffusion-webui,快速的生成你想要的风景图,美女图。      先图为快。 目录 引子 MacOs使用前提条件 第一种 改造秋叶V4版本操作方法 第二种 手动stable-diffusion-webui 运行结果 本文从两个方法进行引导开发者使用教程。 第一种:使用秋叶

    2024年02月09日
    浏览(56)
  • Warning: You are using macOS 13.We do not provide support for this pre-release version.

    安装git 报错 brew install git 解决方法: 直接根据提示安装: xcode-select --install 接着安装 git   brew install git  git 安装成功 

    2024年02月12日
    浏览(44)
  • MacOS13+系统运行Stable Diffusion出现的问题及解决方法汇总

    目录      先睹为快   开发环境 问题一,点“生成”按钮就退出程序 问题二、生成的图片是马赛克 第一步:解决环境问题 第二步:更新指定的torch版本包 步骤一:更新指定的torch包: 步骤二:重新安装pytorch-nightly版本的包: 问题三:正确的启动webui.sh       硬件:基于

    2024年02月16日
    浏览(47)
  • 苹果MacOS系统傻瓜式本地部署AI绘画Stable Diffusion教程

    Stable Diffusion的部署对小白来说非常麻烦,特别是又不懂技术的人。今天分享两个一键傻瓜式安装包,对小白来说非常有用。下面两个任选一个安装就可以。 DiffusionBee是基于stable diffusion的一个安装包,有图形界面,直接安装就能使用,安装完成后会自行下载两个基础的模型大

    2024年02月09日
    浏览(40)
  • macOS 更新Xcode,UE4编译C++报错variable “LayerNames” set but not used -Wunused-but-set-variable解决方案

    本人在一次苹果macOS系统更新(手贱点了一下AppStore里的全部更新)后,发现虚幻引擎UE4.27的C++项目无法编译通过,报错信息为: 经过翻查社区资料: LayerNames error bricking my Mac projects - Platform Builds - Unreal Engine Forums 外加本人亲自验证,得出如下两种适用于不同用户的解决方案

    2023年04月08日
    浏览(41)
  • Stable Diffusion WebUI报错RuntimeError: Torch is not able to use GPU解决办法

    新手在安装玩Stable Diffusion WebUI之后会遇到各种问题, 接下来会慢慢和你讲解如何解决这些问题。 在我们打开Stable Diffusion WebUI时会报错如下: RuntimeError: Torch is not able to use GPU;add --skip-torch-cuda-test to COMMANDLINE_ARGS variable to disable this check 提示:Python 运行时抛出了一个异常。请

    2024年02月08日
    浏览(62)
  • 解决在Windows安装stable diffusion遇到“Torch is not able to use GPU”的问题

    在Windows上安装stable diffusion的最后一步执行 webui-user.bat 时,提示了错误信息 AssertionError: Torch is not able to use GPU; add --skip-torch-cuda-test to COMMANDLINE_ARGS variable to disable this check 具体错误代码如下: 参考了github上的issue,需要修改 webui-user.bat 文件,具体更改如下: COMMANDLINE_ARGS= an

    2024年02月04日
    浏览(73)
  • 完全指南:在MacOS M1上安装Stable Diffusion WebUI,零基础也能上手。

    “ Stable Diffusion WebUI是一个开源界面,可以让用户轻松使用Stable Diffusion模型来生成图像。本教程将指导你在MacOS M1系统上安装和运行Stable Diffusion WebUI。 ” 关注 01 引言 ‍ Stable Diffusion WebUI是一个开源的界面,它使用户能够更容易地使用Stable Diffusion模型生成图像。Stable Diffusi

    2024年04月25日
    浏览(43)
  • 【深度学习】风格迁移,转换,Stable Diffusion,FreeStyle : Free Lunch for Text-guided Style Transfer using Diffusion

    论文:https://arxiv.org/abs/2401.15636 代码:https://github.com/FreeStyleFreeLunch/FreeStyle 介绍 生成扩散模型的快速发展极大地推进了风格迁移领域的发展。然而,大多数当前基于扩散模型的风格转移方法通常涉及缓慢的迭代优化过程,例如模型微调和风格概念的文本反转。在本文中,我们

    2024年04月13日
    浏览(39)
  • Stable diffusion报Torch is not able to use GPU; add --skip-torch-cuda-test to COMMANDLINE_ARGS variab

    Stable diffusion 报 Torch is not able to use GPU; add --skip-torch-cuda-test to COMMANDLINE_ARGS variable to disable this check 错误 及 排查解决 先说一下我的显卡配置 3060Ti ,当刚开始报这个错误的时候,发现基本上很多博主说的都是在 launch.py 或者 webui-user.bat 加一个参数 --precision full --no-half --skip-torc

    2024年02月09日
    浏览(64)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包