561 字
3 分钟
StableDiffusion:抠图

1.说明#

​ 在实际的图像处理过程中,经常需要使用抠图技术,以提取准确的前景目标

2. Florence 2#

​ 使用Florence 2插件的caption_to_phrase_grounding功能,可对图像中的指定目标进行抠图。不过,当前景目标太大时,抠图会不准确或者不完整

2.1 节点安装#

2.2 模型下载#

  • 下载位置:ComfyUI/models/LLM
hf-mirror仓库modelscope仓库
Florence-2-largeFlorence-2-large
Florence-2-large-ftFlorence-2-large-ft
Florence-2-baseFlorence-2-base
Florence-2-base-ftFlorence-2-base-ft

2.3 节点使用#

Florence2:抠图

2.4 示例参考#

参考图准确抠图:cloth不准确抠图:person
模特抠图效果抠图效果
模特准确抠图不准确抠图

3. Florence 2 + SAM 2#

SAM2全称是:Segment Anything Model 2,擅长在图像领域视频领域中完成目标分割任务。它与Florence 2的目标检测功能相结合,会获得较好的目标分割效果。

3.1 节点安装#

3.2 模型下载#

3.3 节点使用#

Florence2+SAM2:抠图

3.4 示例参考#

参考图Florence 2目标检测效果图:蒙版效果图
参考图Florence2目标检测抠图效果:蒙版抠图效果

4. Image Remove Bg#

ComfyUI-Easy-Use组件里的Image Remove Bg节点可以用于提取输入图像中的前景目标,支持RMBG模型Inspyrenet模型

4.1 节点安装#

4.2 模型下载#

4.3 节点使用#

Image Remove Bg:抠图

4.4 示例参考#

参考图效果图:RMBG-1.4效果图:RMBG-2.0效果图:Inspyrenet
模特抠图效果4抠图效果5抠图效果6
模特模特-1.4-抠图-蒙版模特-2.0-抠图-蒙版模特-InsPyrence-抠图-蒙版

5. 总结#

方式输入:图像能否指定目标输出:蒙版输出:裁剪图效果
Florence 2🟢🟢🟢可以指定目标,抠图精度差
Florence 2 + SAM 2🟢🟢🟢可以指定目标,抠图效果好
Image Remove Bg:RMBG-1.4🟢🟢🟢效果很好,强制去除背景
Image Remove Bg:RMBG-2.0🟢🟢🟢效果很好,强制去除背景
Image Remove Bg:InsPyrence🟢🟢🟢细节非常好强制去除背景
封面
示例歌曲
示例艺术家
封面
示例歌曲
示例艺术家
0:00 / 0:00