Stable Diffusion XL 0.9

这篇具有很好参考价值的文章主要介绍了Stable Diffusion XL 0.9。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

虽然此前CEO曾陷入种种争议,但依然不影响Stability AI登上时代杂志。近日,该公司又发布了Stable Diffusion 的XL 0.9版本,35亿+66亿双模型,搭载最大OpenCLIP,让AI生图质量又有了新的飞跃。

Stable Diffusion又双叒升级了!

最近,Stability AI发布了最新版的Stable Diffusion XL 0.9(SDXL 0.9)。

比起之前的模型,这波更新在图像和构图细节上,都有了质的飞跃。

尤其是在参数上,这次的SDXL0.9具有35亿参数基础模型和66亿参数模型的集成管线。相比之下,Beta测试版仅用了单个31亿参数的模型。

为了生成更逼真的图像,以及更大的深度和更高的分辨率(1024x1024),SDXL 0.9使用了两个CLIP模型,包括迄今为止最大的OpenCLIP模型(OpenCLIP ViT-G/14)。

不仅如此,SDXL 0.9在消费级显卡上就能运行。只需要Win10/11或Linux操作系统、16GB内存,以及具有8GB以上显存的英伟达RTX 20系显卡即可。

SDXL 0.9和SDXL Beta的差异究竟有多大?

咱们看图说话。

实测效果

下面就来看看新版的SDXL 0.9,在图片细节上有什么不一样吧~

Prompt:外星人在拉斯维加斯漫步

Stable Diffusion XL 0.9,人工智能,人工智能

SDXL Beta版

Stable Diffusion XL 0.9,人工智能,人工智能

SDXL 0.9

Prompt:优胜美地国家公园的一只狼

Negative prompt:3d渲染,光滑,塑料,模糊,颗粒感,低分辨率,动漫,过度饱和

Stable Diffusion XL 0.9,人工智能,人工智能

SDXL Beta版

Stable Diffusion XL 0.9,人工智能,人工智能 

SDXL 0.9

Prompt:手举咖啡

Negative prompt:3d渲染,光滑,塑料,模糊,颗粒状,低分辨率,动漫

Stable Diffusion XL 0.9,人工智能,人工智能

SDXL Beta版

Stable Diffusion XL 0.9,人工智能,人工智能

SDXL 0.9

官方表示,SDXL系列还会提供一系列超越基本文本prompt的功能。

包括图像对图像的prompt(输入一个图像以获得该图像的变化)、内画(重建图像的缺失部分)和外画(构建一个现有图像的无缝扩展)。

SDXL 0.9在两个CLIP模型上运行,包括迄今为止训练的最大的OpenCLIP模型之一(OpenCLIP ViT-G/14),这增强了0.9的处理能力和创造具有更大深度和1024x1024更高分辨率的逼真图像的能力。

SDXL团队不久将发布一个研究博客,更详细地介绍这个模型的规格和测试。

荣登Time最具影响力公司

就在最近,Stability AI被时代杂志选为100家最有影响力的公司之一。

Stable Diffusion XL 0.9,人工智能,人工智能

对于Stability AI,时代杂志是这样介绍的——

如果你能用文字描述,Stability AI可以将其转化为图片。

Stable Diffusion是该公司帮助训练的免费开源文本到图像生成器,在8月份推出后,它改变了世界对于AI潜力的理解。

然而,Stability AI很快陷入了种种争议,包括如何训练这些工具,以及从互联网上获取数据的版权诉讼之中。

尽管如此,该公司表示,在推出Stable Diffusion 2.0的一个月内,App Store TOP 10应用中的4个,背后都是这个模型。

而公司CEO Emad Mostaque也被报道经常夸大公司的表现,此前他曾声称:Stability AI「真正的开源」为「突破」铺平了道路。

SDXL Beta

实际上,SDXL的Beta版本也没发布多久,可见作图这一块的版本迭代真的是日新月异。

当时,StabilityAI就表示,Stable Diffusion XL并不是最终发布版的名字,并且也并非是v3,因为SD-XL的架构和SD-v2系列的模型架构非常相似。

下面几张SD-XL官方发布的例图,可以看出图像的质量已经非常能打了。

Stable Diffusion XL 0.9,人工智能,人工智能Stable Diffusion XL 0.9,人工智能,人工智能 

SD-XL相比之前版本的改进如下:

  • 使用较短的描述性prompt即可生成高质量图像

  • 可以生成更贴合prompt的图像

  • 图像中的人体结构更合理

  • 与 v2.1和 v1.5版本(程度较轻)相比,SD-XL生成的图片更符合大众审美

  • 负面提示词(negative prompt)是可选项

  • 生成的肖像图更逼真

  • 图像中的文本更清晰

清晰可读的文字

在v1系列和v2.1版本的Stable Diffusion模型中,并不具备在图片中生成可读文本的能力。

虽然SD-XL生成的文本信息并不总是准确,但确实得到了巨大的提升。

Stable Diffusion XL 0.9,人工智能,人工智能

一个年轻的女性举着一个牌子,上面写着「Stable Diffusion」,头发高亮,坐在餐厅外面,棕色的眼睛,穿着裙子,侧灯 whaosoft aiot http://143ai.com

更好的人体结构

Stable Diffusion在生成人体解剖结构方面一直存在诸多问题,多几条腿、少个胳膊实在是太常见不过的问题。

比如说SD-v1.5生成瑜伽的图像,经常会出现扭曲的人体。

而SD-XL虽然生成的图像并不完美,不过在人体姿态方面已经有了显著的进步。

Stable Diffusion XL 0.9,人工智能,人工智能

更有美感(more aesthetic)

比如同样以屋子为主题,SD-XL可以生成更对称、视觉效果更好的照片。

Stable Diffusion XL 0.9,人工智能,人工智能

SD-XL在肖像照片上也有显著改进。

Stable Diffusion XL 0.9,人工智能,人工智能 

参考资料:

https://stability.ai/blog/sdxl-09-stable-diffusion文章来源地址https://www.toymoban.com/news/detail-527535.html

到了这里,关于Stable Diffusion XL 0.9的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 神奇的人工智能之神笔马良|Stable Diffusion使用

    1,月球上骑马的宇航员。 image generate by stable-diffusion model 2,下棋的狗 image generate by stable-diffusion model 3,沉迷学习的史努比 image generate by stable-diffusion model 4,鲤鱼跃出海面

    2024年02月09日
    浏览(48)
  • 人工智能AI系列 - java 版的stable diffusion 图像生成

    图像生成 文生图:输入提示词(仅支持英文),生成图片(仅支持英文) GPU版本 StableDiffusionGPU.java CPU版本 StableDiffusionCPU.java 图生图:根据图片及提示词(仅支持英文)生成图片 GPU版本 Img2ImgStableDiffusionGPU.java 显卡CUDA:11.7版本 参考测试数据:分辨率 512*512 25步 CPU(i5处理器

    2024年02月09日
    浏览(74)
  • AI创作教程之 Stable Diffusion 为何是人工智能新时代艺术创作的基石

    我们的人脑在当今人类产生的技术进步中发挥着最大的作用。在这种智能的基础上,人类创造了各种各样的产品,但不必说每一个都改变了人类生活的本质。随着模型权重的公开发布以保持稳定性,世界将发生巨大变化。AI稳定扩散文本到图像引擎。有了这个,任何人都可以

    2024年02月15日
    浏览(46)
  • 如何在Mac、Windows和Docker上本地电脑上搭建AI人工智能绘画工具Stable Diffusion

    微信公众号:运维开发故事,作者:double冬 目前,有诸如Midjourney等人工智能绘画网站可供大家来免费使用,但是由于是免费资源肯定会在机器性能和使用次数方面有所限制,因此如果能将人工智能绘画工具部署在本地运行就会突破机器性能和使用次数等方面的限制。可能所

    2024年02月13日
    浏览(57)
  • TPU编程竞赛|Stable Diffusion大模型巅峰对决,第五届全球校园人工智能算法精英赛正式启动!

    目录 赛题介绍 赛题背景 赛题任务 赛程安排 评分机制 奖项设置         近日,2023第五届全球校园人工智能算法精英赛正式开启报名。作为赛题合作方,算丰承办了“算法专项赛”赛道,提供赛题 「面向Stable Diffusion的图像提示语优化」 ,同时为参赛选手提供了丰富的云

    2024年02月08日
    浏览(64)
  • Stable Diffusion现代人工智能艺术成功背后的物理学原理,破译用于文本到图像生成的著名 AI 模型与物理学中观察到的过程之间的联系

    毫不奇怪地否认本文的许多内容是使用人工智能生成的,当然包括描绘当今数字艺术最大趋势之一的图像。 虽然最近几天迅速传播并融入我们对话中的一些最新语言模型不一定适合图像生成,但本文旨在关注文本到图像 AI,特别是著名的系统“稳定扩散” ”。创意工具市场

    2024年02月11日
    浏览(67)
  • stable diffusion秋叶整合包安装时报错No Python at ‘“D:\python\python.exe‘请按任意键继续. . .人工智能画画AI绘图报错解决

    使用秋叶的stable diffusion整合包报错,原因是原先安装过python,后面卸载了,然后还有anaconda和一些其他软件有自带的python,我先在C盘搜索python,删除搜索到的所有文件,因为秋叶的整合包有python,我运行还是报错,找了很久,终于找到了python的配置文件,在E:AIAI2sd-webui-a

    2024年02月11日
    浏览(46)
  • Stable Diffusion XL搭建

    这里主要介绍如何从0到1搭建Stable Diffusion XL进行AI绘画。 Stable Diffusion XL是Stable Diffusion的优化版本,由Stability AI发布。比起Stable Diffusion,Stable Diffusion XL做了全方位的优化,Rocky相信,Stable Diffusion会是图像生成领域的“YOLO”,而Stable Diffusion XL那就是“YOLOv3”。 零基础使用Co

    2024年02月11日
    浏览(40)
  • Stable Diffusion XL简介

    Stable Diffusion XL的是一个文生图模型,是原来Stable Diffusion的升级版。相比旧版的Stable Diffusion模型,Stable Diffusion XL主要的不同有三点: 有一个精化模型(下图的Refiner),通过image-to-image的方式来提高视觉保真度。 使用了两个text encoder,OpenCLIP ViT-bigG和CLIP ViT-L。 增加了图片大小

    2024年02月19日
    浏览(46)
  • Stable Diffusion-XL

    开源、免费的Stable Diffusion就能达到Midjourney水平! 自从Midjourney发布v5之后,在生成图像的人物真实程度、手指细节等方面都有了显著改善,并且在prompt理解的准确性、审美多样性和语言理解方面也都取得了进步。 相比之下,Stable Diffusion虽然免费、开源,但每次都要写一大长

    2024年02月15日
    浏览(44)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包