Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景

这篇具有很好参考价值的文章主要介绍了Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

首先感谢秋叶大佬的整合包!!!
致敬所有在为AI绘画付出努力的大佬!!!

省流:绘图时禁用插件sd-webui-segment-anything

场景:在电商换装场景下,为图中角色换衣服,使用了2个ControlNet。

报错日志:

 检查了下控制台日志显示,sd-webui-segment-anything(下文用seg表示)的一个py脚本有bug,

但是我的蒙版已经绘制好了,不需要使用seg了,为什么还会调用seg的程序呢?

Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景

场景描述(可不看):

为了让底图的换装更精确,不影响肢体周边环境,我是使用了一个可以精确对图片的部分进行蒙版绘制的插件:sd-webui-segment-anything
得到一张腿部蒙版的图:
Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景

切换到图生图-上传重绘蒙版,上传原图,蒙版,图片长等基础参数:

 Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景

设置ControlNet:

我是用了2个模型:canny(绘制线稿),openpose(绘制骨骼)

1. 绘制线稿貌似对我的重绘没有影响,先不管

2. openpose是为了让角色的腿部能按照原图中腿的走向进行重绘,也避免其他肢体部分与腿部重叠,影响出图效果。

一切准备就绪了,点生成,在一段等待后,出图效果很恶心,出图效果很乱:

1. 腿部周边出现空隙,没能充满蒙版,有时候还会出现畸形,
2. 红框中未显示我使用的controlnet(应该有个canny的线稿和openpose的骨骼)

Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景


 

没研究清楚如何关闭seg的使用,所以切换到拓展页禁用了seg

Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景

再回到图生图-上传重绘蒙版后,重新配置一系列参数得到结果:

1. 重绘部分贴合蒙版边线,过度自然,出图结果稳定

2.红框中可以看到使用了canny的线稿和openpose的骨骼,能够固定腿部位置,不容易畸形。

 Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景文章来源地址https://www.toymoban.com/news/detail-487441.html

到了这里,关于Stable Diffusion 图生图-蒙版重绘,Controlnet未生效的一个场景的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Stable Diffusion 图生图+ControlNet list index out of range

    在webui1.5中用图生图+ControlNet批量处理图片的时候报错: controlnet indexError: list index out of range 解决方法: 在controlNet的设置页中勾选不输出检测图即可。 参考:https://github.com/AUTOMATIC1111/stable-diffusion-webui/issues/12286

    2024年02月07日
    浏览(49)
  • AI 绘画用 Stable Diffusion 图生图局部重绘功能给美女换装(这是我能看的嘛)

    昨天带大家一起装好了 Stable Diffusion 的环境,今天就来带大家一起体验一下 Stable Diffusion 的 局部重绘 功能。 没装好环境的可以看上一篇:AI 绘画基于 Kaggle 10 分钟搭建 Stable Diffusion(保姆级教程) Stable Diffusion 的局部重绘使用非常简单,大家按图一步步操作即可: 点击“图

    2024年02月11日
    浏览(56)
  • 【stable diffusion】保姆级入门课程02-Stable diffusion(SD)图生图-基础图生图用法

    目录 学前视频 0.本章素材  1.图生图是什么 2.图生图能做什么 3.如何使用图生图 4.功能区域 4.1.提示词区域 4.2.图片提示词反推区域 1.CLIP反推 2.DeepBooru 反推 4.3.图片上传区域 4.4.结果图区域 4.5.缩放模式  4.6.重绘幅度 7.结语 8.课后训练   stable diffusion图生图教程 百度网盘 夸克

    2024年02月15日
    浏览(73)
  • Stable Diffusion图生图

            我们都知道,模型在运算时是根据我们提供的提示内容来确定绘图方向,如果没有提示信息,模型只能根据此前的学习经验来自行发挥。在之前的文生图篇,我们介绍了如何通过提示词来控制图像内容,但想要实现准确的出图效果,只靠简短的提示词是很难满足实

    2024年02月04日
    浏览(48)
  • Stable Diffusion教程:图生图

    “图生图”是 Stable Diffusion的 核心功能之一,它的主要能力是根据现有的图片 + 提示词生成新的改造图片,这在日常的工作和生活中都特别有用。 话不多说,让我们看看它都有什么神奇的魔法吧。 本节以生成人物的二次元风格的照片为例,具体步骤如下: 1、在Stable Diffusi

    2024年04月14日
    浏览(65)
  • PS - Photoshop 抠图与剪贴蒙版功能与 Stable Diffusion 重绘

    欢迎关注我的CSDN:https://spike.blog.csdn.net/ 本文地址:https://spike.blog.csdn.net/article/details/131978632 Photoshop 的剪贴蒙版是一种将上层图层的内容限制在下层图层的形状范围内的方法,也就是说,上层图层只能在下层图层的可见区域显示,而下层图层则相当于一个模板或遮罩,这样可

    2024年02月15日
    浏览(46)
  • AI 绘画 | Stable Diffusion 图生图

    Stable Diffusion 不仅可以文生图,还可以图生图。文生图就是完全用提示词文本去生成我们想要图片,但是很多时候会有词不达意的感觉。就像我们房子装修一样,我们只是通过文字描述很难表达出准确的想要的装修效果,如果能给到一张设计图或者效果图,那么就能更加直白

    2024年02月03日
    浏览(74)
  • Stable Diffusion学习指南【图生图篇】

    即使之前在Midjourney中有过图生图的使用经验,但大部分人对该功能的印象仅限于喂图,通过它可以让模型了解更多我们要传达的信息,从而达到准确出图的目的。但在Stable Diffusion中的图生图还要强大的多,除了控图还包含了手动涂鸦、局部重绘、图像扩展等更多功能。 今天

    2024年02月03日
    浏览(69)
  • Stable Diffusion 系列教程 | 图生图基础

    前段时间有一个风靡全网的真人转漫画风格,受到了大家的喜欢 而在SD里,就可以通过图生图来实现类似的效果 当然图生图还有更好玩的应用,我们一点一点来探索 首先我们来简单进行一下图生图的这一个实践---真人转动漫 和文生图基本界面差不多,多了一个上传图像区

    2024年02月11日
    浏览(61)
  • Stable Diffusion高清修复老照片-图生图

    修复老照片的意义就不多说了,相信大家都明白,这里直接开讲方法。 1、原理 这个方法需要一个真实模型,以便让修复的照片看起来比较真实,我这里选择:realisticVisionV20,大家有更好的给我推荐哦。 还需用搭配两个特殊设置: ControlNet Tile:这是一个ControlNet模型,用于放

    2024年02月14日
    浏览(44)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包