基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能

这篇具有很好参考价值的文章主要介绍了基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

教程简述

在本教程中,您将学习如何在阿里云交互式建模(PAI-DSW)中,使用Stable-Diffusion-WebUI实现AI扩图功能。

随着AIGC技术的落地发展,越来越多的创新玩法闯进了我们视野,AI扩图便是其中之一。只需给AI一张图片,AI就会根据图像的上下文语义信息,预测和补充图像边界,生成一张尺寸更大的图像。AI扩图有时是拯救废片的神器,能够将半身照扩展为惊艳的全身照,有时也会翻车,生成的图像让人哭笑不得。

本教程使用Stable Diffusion WebUI实现AI扩图功能效果展示如下:

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

基于本教程可以体验:

新用户可免费领取价值万元的人工智能平台PAI 试用资源

学会如何快速在阿里云上创建一个交互式训练开发环境。

学会如何在DSW中启动WebUI。

学会如何在DSW实现AI扩图功能。

使用PAI-DSW快速启动SD WebUI

1. 准备环境和资源

1.1 领取交互式建模PAI-DSW免费试用权益

前往活动页面,领取交互式建模PAI-DSW产品免费试用资源包

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

  • 对于交互式建模 PAI-DSW 的新用户,阿里云提供了5000CU*H 的免费试用资源,可以在活动页面中直接领取(试用规则请参照阿里云免费试用:https://free.aliyun.com/);或可以购买交互式建模 PAI-DSW 资源包参与活动,购买链接:PAI-DSW 100CU*H资源包,价格 59 元起;如不购买资源包,PAI-DSW 会按量进行计费,计费标准详见阿里云产品定价。

1.2 创建PAI-DSW实例

  1. 前往人工智能平台PAI控制台,链接:https://pai.console.aliyun.com/
  2. 开通人工智能PAI并创建默认工作空间。请参见开通并创建默认工作空间。
  3. 在人工智能平台PAI控制台内,选择交互式建模PAI-DSW,或点击链接

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

4.点击创建实例(如上图)

5.自定义输入实例名称

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

6.选择实例机型,GPU分类-ecs.gn6v-c8g1.2xlarge(支持资源包抵扣),若无此机型库存可更换地域尝试;

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

7.选择镜像,stable-diffusion-webui-develop:1.0.0-pytorch2.01-gpu-py310-cu117-ubuntu22.04

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

8.点击“下一步”

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

9.确认【资源配置】及【镜像】如图所示,点击创建实例;

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

10.大约等到3-5分钟,实例状态变为「运行中」,实例创建完成;

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

1.3 在DSW中打开教程文件

  1. 单击需要打开的实例操作列下的打开,进入PAI-DSW实例开发环境。
  2. Notebook页签的Launcher页面,单击快速开始区域Tool下的浏览Gallery,打开Gallery页面

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

3.在DSW Gallery页面中,搜索并找到AI扩图神器:放飞你的想象力教程,单击教程卡片中的在DSW中打开。

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

4.右侧出现文件夹“demos”,点击“demos”文件夹,点击“stable_diffusion_inpaint”文件夹,点击“stable_diffusion_inpaint.ipynb”文件,打开已编写好的Notebook最佳实践教程,具体步骤如下图所示

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

5.完成以上步骤,顺利打开AI扩图神器:放飞你的想象力 Notebook最佳实践。

1.4 运行教程文件

  1. 在打开的教程文件stable_diffusion_inpaint.ipynb文件中,您可以直接看到教程文本,您可以在教程文件中直接运行每个代码片段。当成功运行结束一个步骤命令后,再顺次运行下个步骤的命令。

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

2.本教程一共3个运行步骤:

    1. 下载stable-diffusion-webui开源库
    2. 下载模型
    3. 启动WebUI

3.当第3步启动WebUI运行完成后,在返回的运行详情结果中单击URL链接,进入WebUI页面。后续您可以在该页面完成AI扩图。

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

2. 完成部署开始体验AI扩图

为了实现AI扩图的能力,需要在Stable Diffusion WebUI页面进行如下配置。

2.1 进入图生图界面

进入图生图界面,Stable Diffusion模型和模型的VAE保持默认即可。

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

2.2 基本配置

图生图配置,完成图片上传和图生图参数配置。具体参考下图。

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

  1. 缩放模式:选择填充。
  2. 重绘幅度:选择1.0。 — 通常来说,重绘幅度参数越大,生成的图片和原来的图片相似度越低,但使用controlnet inpaint扩图时,需要拉满。
  3. 宽度和高度:填写扩图后的大小。
  • 请根据原图尺寸以及扩图需求来设置尺寸。注意,扩图时原图片的比例不能保持相同。
  • 本例设置宽度为1024,高度为512,期待看到图像水平延展的结果。

2.3 ControlNet配置

接下来,需要配置ControlNet,参数如下:

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

  • 选择启用、Upload independent control image和Pixel Perfect。前两者是为了让ControlNet通过图片控制生图,后者是为了改善生成效果。这里上传跟上文一样的图片。
  • Controltype:选择局部重绘。
  • 预处理器:选择inpaint_only。
  • 模型:选择control_v11p_sd15_inpaint,这是SD1.5的ControlNet扩图模型。
  • ControlMode:选择Controlnet更重要。
  • 画面缩放模式:选择调整大小并填充。

2.4 输入prompt,完成AI扩图

按照个人喜好,输入正向及负向prompt,完成AI扩图,以下为示例参考。

heart-shape balloons——心形气球

Christmas tree——圣诞树

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

本次活动主题:AI扩图后,图片里有一颗树。请由人工智能平台PAI(PAI-DSW)完成AI扩图后,上传符合活动主题的作品至活动页面 >> 「和PAI一起,每周玩转AI」第五期:使用 PAI-DSW 实现AI扩图功能

3. 资源清理及后续

3.1 清理

  • 在实验完成后,可前往对应产品控制台,停止或删除实例(两个操作均可),避免实例持续处于运行中,在超出免费试用额度后,带来额外的扣费

基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能,云栖号技术分享,人工智能,云计算,阿里云,ai

  • 后续仍考虑使用该实例>>停止;后续不再使用该实例>>删除,成功停止后即停止资源消耗。

3.2 后续

在试用有效期期间,您还可以继续使用DSW实例进行模型训练和推理验证。

原文链接

本文为阿里云原创内容,未经允许不得转载。文章来源地址https://www.toymoban.com/news/detail-807074.html

到了这里,关于基于 PAI-DSW 使用 SD WebUI 实现AI扩图功能的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Stable Diffusion在阿里云PAI DSW平台实践,送浩浩妈妈二次元

    内容 说明 镜像 stable-diffusion-webui-develop:1.0-pytorch2.0-gpu-py310-cu117-ubuntu22.04 镜像区域 杭州、上海、北京、深圳 环境安装 在DSW Gallery中找到“AI扩图神器,放飞你的想象力”,点击“在DSW中打开”按钮,进入后已提供了额库下载、基础模型下载、webui运行等基础 在WebUI中进入扩展

    2024年04月26日
    浏览(41)
  • AIGC专栏5——EasyPhoto AI写真照片生成器 sd-webui插件介绍、安装与使用

    在视觉方向的AIGC领域,AI写真是一个靠谱且经过验证的落地方案,随着StableDiffusion领域开源社区的快速发展,社区也涌现了类似 FaceChain 这样基于 Modelscope开源社区结合 diffusers 的开源项目,用于指导用户快速开发个人写真。 然而对于大量使用SDWebUI的 AIGC 同学们,短时间内却

    2024年02月09日
    浏览(55)
  • Stable Diffusion高阶技能(2)-稳定扩散百态:解密AI绘画工具「SD WebUI」的提示词高级使用策略

    在我们的生活中,艺术元素可谓无处不在,而处于中心地位的绘画,无疑是携带着强烈的艺术魅力。现如今随着AI技术的日新月异,AI绘画对我们的生活世界的改造影响越来越深远。那么,如何让我们在AI绘画工具中更好的指导AI完成我们心中的作品呢? 这需要我们玩转这个工

    2024年02月14日
    浏览(53)
  • (十六) AIGC、AI绘画、SD-WebUI、本地部署、Stable-Diffusion本地模型、最新Controlnet扩展

    1、简介 AI绘画的工具网站很多,大部分收费/限制数量,而且速度很慢,如果部署本地的模型,不仅免费无限制、还可以提高出图效率,随意生成自己想象中的图,部署中发现有各种各样的环境配置问题,无法正确运行。 本博整理了SD-WebUI的整合包(Windows环境下),包括启动器

    2024年02月13日
    浏览(79)
  • AI绘画(sd webui)报错mat1 and mat2 shapes cannot be multiplied的处理

    问题描述 在用webui转换游戏图标的风格时,使用controlnet固定图标样式,运行报错:RuntimeError: mat1 and mat2 shapes cannot be multiplied (154x1024 and 768x320),报错说的是pytorch在进行矩阵乘法运算时,第一个矩阵的行数与第二矩阵的列数不相等,无法作乘法。 解决方法 一头雾水,查了gi

    2024年02月11日
    浏览(35)
  • SD-WebUI-SadTalker:让照片说话,数字人使用方法

    我的SD-WebUI 可以实现照片说话,也就是SadTalker。看了一下有新的版本,不需要之前那么多模型了。那么让我们看看如何在SD-WebUI 中安装使用 SadTalker 吧。 什么是SadTalker: SadTalker 是西安交通大学开源的一个基于Stable Diffusion的插件,它能够通过输入图片和音频文件生成会说话或

    2024年04月10日
    浏览(63)
  • 阿里云 PAI 免费试用搭建 stable-diffusion-WebUI

    最近玩 stable-diffusion 一直在 Colab 上,前几天发现阿里云的 PAI 有免费试用,就玩了一下,发现速度比 Colab 还快,然后可以免费试用三个月(如果不关机的话估计就只能玩 1 个月)。 首先在阿里云首页免费试用菜单下面点击了解更多: 然后在最下方找到 PAI-DSW 的免费试用,点

    2024年02月10日
    浏览(69)
  • AI扩图哪家强?我们实地测试了5款扩图工具

    AI扩图的命运齿轮开始转动了。 近日,“AI扩图”在各个社交平台上频频出圈,#AI扩图#话题,在抖音平台累计播放数超7.8亿次。 何为AI扩图? AI 扩图功能给我们带来了一个观察世界的新角度。在 AI 的加持下,我们可以看到原本熟悉的专辑封面、视频截图等画面之外「藏」着

    2024年02月03日
    浏览(36)
  • 工业级开源facechain人物写真sd-webui插件使用方式

    facechain人物写真应用自8月11日开源了第一版证件照生成后。目前在github(https://github.com/modelscope/facechain)上已有近6K的star,论文链接:FaceChain: A Playground for Identity-Preserving Portrait Generation:https://arxiv.org/abs/2308.14256。facechain社区非常活跃,fork、commit数都很大,相应截图如下

    2024年01月20日
    浏览(94)
  • 云服务器免费领用,体验PAI-EAS 5分钟部署Stable Diffusion webUI

    最近发现大家都在体验AIGC的Stable Diffusion 文生图模型,很多博主也分享了详细的本地部署保姆级教程。 为什么选择本地部署Stable Diffusion 因为没有生成数量的限制,不用花钱,不用被NSFW约束,生成时间快,不用排队,自由度高,插件丰富,功能众多,可以调试和个性化的地方

    2024年02月16日
    浏览(52)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包