Stable Diffusion 抠图工具使用小记

这篇具有很好参考价值的文章主要介绍了Stable Diffusion 抠图工具使用小记。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

      用stable diffusion有段时间了,最近使用了它的抠图工具 (Remove background)。这里是我对该工具的使用和记录。希望可以帮其他人了解相关内容。文末附100个Lora资源方便大家使用。
      在图像处理中,抠图是一项非常重要的任务。传统的抠图方法通常需要人工进行较长时间的描边和选择,效率低下且不准确。然而,Stable Diffusion提供的工具相当智能,可用于图像抠图,使该过程更加快速、准确和简单。 它可以用于处理不同尺度、不同复杂度的图像,并且可以通过调整参数来适应不同的抠图任务,例如,对于复杂背景的图像,可以调整参数以确保抠图的准确性。

插件介绍

使用了中文界面比较方便,感谢提供翻译的大兄弟。
Stable Diffusion 抠图工具使用小记
如果当前的SD中没有这部分内容,可以通过“扩展”选项卡进行插件的安装:
Stable Diffusion 抠图工具使用小记
插件URL  GitHub - AUTOMATIC1111/stable-diffusion-webui-rembg: Removes backgrounds from pictures. Extension for webui.
抠图工具( Remove background)在使用时可以选择不对要扣的图进行缩放,缩放比例这里选1就可以了,这样可以纯进行抠图。
Stable Diffusion 抠图工具使用小记

缩放算法选择

       缩放工具中,SD默认会携带 u2net、u2netp、u2net_human_seg、 u2net_cloth_seg、 silueta 几种算法。
U-2-NET系列算法介绍
论文名称: U2-Net: Going Deeper with Nested U-Structure for Salient Object Detection
论文地址: https://arxiv.org/pdf/2005.09007.pdf
论文作者:Xuebin Qin, Zichen Zhang, Chenyang Huang, Masood Dehghan, Osmar R. Zaiane and Martin Jagersand University of Alberta, Canada
GIT地址: GitHub - xuebinqin/U-2-Net: The code for our newly accepted paper in Pattern Recognition 2020: "U^2-Net: Going Deeper with Nested U-Structure for Salient Object Detection."
       算法还是有些难,具体的差异我这种需要吃俩鲸鱼🐳补补脑的还没全看懂,不过怎么用和差异还是搞懂了一些,下面是一些实测效果(空缺位置偷懒了,这不重要!):
测试原图
Stable Diffusion 抠图工具使用小记
Stable Diffusion 抠图工具使用小记
Stable Diffusion 抠图工具使用小记
u2net
(大部分情况下足够了)
Stable Diffusion 抠图工具使用小记
Stable Diffusion 抠图工具使用小记
Stable Diffusion 抠图工具使用小记
u2netp
人物颜色与背景比较鲜明时效果还可以,但是对比不明显时,没有合理的微调参数配合,效果不佳->比如蝙蝠侠的腿没扣出来。
Stable Diffusion 抠图工具使用小记
Stable Diffusion 抠图工具使用小记
u2net_human_seg
(人像提取优化)
精度和发丝部分效果明显一些
Stable Diffusion 抠图工具使用小记
u2net_sloth_seg
(服装提取优化)
此模式使用时需注意光线方向和效果,差异较大时会被拆分成上下多个部分,逆光太强时会存在被识别为背景被抹除的情况。
Stable Diffusion 抠图工具使用小记
silueta
Stable Diffusion 抠图工具使用小记
通过多种算法比较来看对边缘和细节的处理略微不同,默认设置基本都可以搞定,在具体使用的时候可以根据需求的精度不同进行一些选择。

额外参数:

        抠图工具中还有“ Return mask” 与“ Alpha matting” 两个选项,
        Return mask 效果不需要解释了,Alpha matting的说明:
Alpha matting 是一种将前景对象从背景中分离的技术,其中通过计算前景对象和背景之间的 alpha 值来实现分离。
  •  FOREGROUND_THRESHOLD前景阈值(下图说明简写“F-”):
          在具体的应用场景中,该参数通常用于指定 alpha matting 技术中前景图像的阈值。 该参数用于指定 alpha 值高于该阈值的图像区域将被视为前景。 具体取值通常在 0 255 之间,表示 alpha 值的阈值。如果指定的值较低,则可能将一些背景区域识别为前景,导致分离效果不佳。如果指定的值较高,则可能将一些前景区域识别为背景,同样会导致分离效果不佳。
  •  BACKGROUND_THRESHOLD背景阈值(下表简写“B-”):
        具体取值通常在0 255 之间,表示 alpha 值的阈值。如果指定的值较低,则可能将一些前景区域识别为背景,导致分离效果不佳。如果指定的值较高,则可能将一些背景区域识别为前景,同样会导致分离效果不佳。
  • ERODE_SIZE Alpha抠图腐蚀尺寸:
        具体取值通常是一个整数,表示腐蚀操作的卷积核大小,即在图像中取一个长、宽为该值的矩形区域,对该区域进行腐蚀操作。如果指定的值较小,则可能无法去除所有的噪声或不连续部分,导致分离效果不佳。如果指定的值较大,则可能将前景或背景中的某些部分误认为噪声或不连续部分,同样会导致分离效果不佳。
对比测试效果如下:
图接上文
Return mask
Stable Diffusion 抠图工具使用小记
F-20
Stable Diffusion 抠图工具使用小记
F-100
Stable Diffusion 抠图工具使用小记
F-220-B-10
Stable Diffusion 抠图工具使用小记
F-220-B-100
Stable Diffusion 抠图工具使用小记
注意:参数微调后,与上面的比较,可以看到人物抠图的黑边没有了 。使用起来会更好一些,推荐参数:(E:10 ,F:220,B:40-100)。
具体的参数使用情况可以依据个人喜好及需求情况做些调整。

批量处理

Stable Diffusion 抠图工具使用小记
​​​​​​​
通过“批量处理”,“从目录进行批量处理” 效率起飞…… 摸鱼神器……
PS:所有测试都是基于MAC M2 MAX 入门版配置。

整理的100个Lora资源

内容来自于C站,不能魔法访问C站的小伙伴可以下载使用,已经使用C站助手更新了效果图与pormpt及模型信息,下载下来之后直接解压到Lora目录即可使用。

https://download.csdn.net/download/bestpasu/87762524 文章来源地址https://www.toymoban.com/news/detail-449624.html

到了这里,关于Stable Diffusion 抠图工具使用小记的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • PS - Photoshop 抠图与剪贴蒙版功能与 Stable Diffusion 重绘

    欢迎关注我的CSDN:https://spike.blog.csdn.net/ 本文地址:https://spike.blog.csdn.net/article/details/131978632 Photoshop 的剪贴蒙版是一种将上层图层的内容限制在下层图层的形状范围内的方法,也就是说,上层图层只能在下层图层的可见区域显示,而下层图层则相当于一个模板或遮罩,这样可

    2024年02月15日
    浏览(46)
  • 【AI绘画Stable Diffusion】高清图像放大+面部修复+一键抠图,谈谈你可能不知道的优化技巧!

    一提起后期处理,我猜你可能立马想到的就是图像放大。 今天,我要向你展示的后期处理手法,以及优化技巧。 如果你常用的是秋叶大佬的整合包,那么你对\\\"R-ESRGAN 4x+\\\"和\\\"R-ESRGAN 4x+ Anime6B\\\"应该不会陌生。 R-ESRGAN 4x+:写实图片 R-ESRGAN 4x+ Anime6B:二次元图片 然而,你是否曾在

    2024年02月16日
    浏览(59)
  • AI 绘画工具 Stable Diffusion 本地安装使用

    最近要用到 AI 绘画,所以研究了下目前市面上的 AI 绘画工具,真可谓是琳琅满目,但主流的还是 Stable diffusion 和 Midjourney 两大阵营。 Midjourney 不多说,开箱即用,对新手非常友好,但不免费,Stable diffusion 相对 Midjourney 来说,专业性更强,不易上手,但更灵活,指哪打哪,模

    2024年02月10日
    浏览(63)
  • AIGC 绘画Stable Diffusion工具的安装与使用

    我们先让ChatGPT来帮我们回答一下,什么是Stable Diffusion Stable Diffusion 是一种基于概率模型的图像生成技术。它通过对图像空间中每个像素的颜色值进行推断,从而生成具有高度真实感和细节的图像。 Stable Diffusion 使用一种称为扩散过程的方法来生成图像。在生成过程中,它从

    2024年02月03日
    浏览(43)
  • 使用开源免费AI绘图工具神器-Stable Diffusion懒人整合包

    Stable Diffusion (简称 SD) 是一款开源免费的以文生图的 AI 扩散模型,它和付费的 Midjourney 被人称为当下最好用的 AI 绘画工具。你在网上看到的绝大多数优秀 AI 图片作品,基本都是出自它俩之手。其中 Midjourney 是在线服务 (需绑信用卡付费),而 Stable Diffusion 则完全免费,可在自

    2024年02月09日
    浏览(45)
  • stable diffusion AI绘图工具的安装和使用centos7.8系统

    重要 【AI作画】stable diffusion webui Linux虚拟机 Centos 详细部署教程 服务器CentOS 7 安装 Stable Diffusion WebUI ,并映射到本地浏览器 CentOs7 + Stable Diffusion + Novel AI实现AI绘画 stable diffusion webui安装部署教程 wget报错原因:ERROR: cannot verify xxx’s certificate…use --no-check-certificate wget --no-chec

    2024年02月06日
    浏览(70)
  • AI 绘画Stable Diffusion 研究(十三)SD数字人制作工具SadTlaker使用教程

    免责声明: 本案例所用安装包免费提供,无任何盈利目的。 大家好,我是风雨无阻。 想必大家经常看到,无论是在产品营销还是品牌推广时,很多人经常以数字人的方式来为自己创造财富。而市面上的数字人收费都比较昂贵,少则几千,多则上万。 那么如何才能免费制作属

    2024年02月12日
    浏览(46)
  • 最新版本 Stable Diffusion 开源 AI 绘画工具之文本转换(Embedding)以及脚本(Script)高级使用篇

    这个功能其实就是将你常用的提示词打包成一个,你在写 prompt 的时候,只要输入这个,就可以实现特定的各种预设好的画风、画质或者其他相关的特征。 在之前的版本中,这个功能也被叫做文本嵌入 (Embedding) 我们可以在模型网站上找到很多别人已经打包好的

    2024年02月07日
    浏览(61)
  • Stable Diffusion高阶技能(2)-稳定扩散百态:解密AI绘画工具「SD WebUI」的提示词高级使用策略

    在我们的生活中,艺术元素可谓无处不在,而处于中心地位的绘画,无疑是携带着强烈的艺术魅力。现如今随着AI技术的日新月异,AI绘画对我们的生活世界的改造影响越来越深远。那么,如何让我们在AI绘画工具中更好的指导AI完成我们心中的作品呢? 这需要我们玩转这个工

    2024年02月14日
    浏览(53)
  • Mac和Windows一键安装Stable Diffusion WebUI,Lama Cleaner,SadTalker,等AI工具,使用国内镜像,无需魔法。

    Mac和Windows一键安装Stable Diffusion WebUI,Lama Cleaner,SadTalker,等AI工具,使用国内镜像,无需魔法。 根据任何领域的文本输入生成高质量、高分辨率且逼真的图像。 Window 使用xformers提速 RTX2060 3秒出图 Mac M1 使用MPS支持GPU 10秒出图 智能图片编辑器:轻松擦除、修复!利用先进深度学习,

    2024年02月12日
    浏览(59)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包