继Meta推出分割一切(SAM)算法导致计算机视觉不存了之后,手工修图也不存在了!
国内团队隔天就推出了Grounded-SAM(卷爆了的最强全家桶), 检测一切,分割一切,生成一切!简单说,你只要动嘴,AI就可以帮你把图片里边需要修改的部分识别分割出来,然后给你换咯~!
Gruonded-SAM通过整合以下工具得以实现这个功能:
1.Segment Anything:一个强大的分割模型。但它需要提示(如框/点)来生成掩码。
2.Grounding DINO:一个强大的零样本检测器,能够使用自由形式文本生成高质量的框和标签。
3.Grounding DINO + SAM:可以通过文本输入在任何级别上检测和分割所有内容!
4.BLIP + Grounding DINO + SAM :用于根据文字对图片进行自动标注!
5.Grounding DINO + SAM + Stable-diffusion :结合输入图片/文字/前边生成新的mask(遮罩),然后用SD的inpainting模式生成新图片(修图)!
6.Whisper+ Grounding DINO+SAM:可用于语音识别并分割任何内容!
果然团结就是力量,多说一句,核心作者里边的刘世隆本科是在清华学的土木工程,果然建筑行业一直在为各行各业输送高质量人才~
▶code:github.com/IDEA-Research/Grounded-Segment-Anything
▶demo:![](http://h5.sinaimg.cn/upload/2015/09/25/3/timeline_card_small_web_default.png)网页链接
▶拓展阅读:![](https://h5.sinaimg.cn/upload/2015/09/25/3/timeline_card_small_web_default.png)Meta「分割一切」超进化版来了!IDEA领衔国内顶尖团队打造:检测、分割、生成一切,狂揽2k星
▶附送stable diffusion webui中运行SAM插件(仅分割):github.com/continue-revolution/sd-webui-segment-anything
↑以上内容均精选自我每周更新的私人图书馆——知识星球:AI白日梦想家,加入方式请见置顶帖哈~!