又进化了,抠图被AI终结!
“
大家注意:因为微信最近又改了推送机制,经常有小伙伴说错过了之前被删的文章,比如前阵子冒着风险写的全指南,再比如一些限时福利,错过了就是错过了。
所以建议大家加个星标,就能第一时间收到推送。👇
抠图工具大家不陌生吧,我们前后做过两期的抠图工具评测——
省流答案是,第一次胜出来的王者是国外的 remove.bg(无法下载高清原图),第二次胜出来的王者是国内的佐糖(需要登录),我日常用的也是这俩。
remove.bg
佐糖
但你发现没有,无论是 remove.bg 也好,佐糖也罢,都在官网里提到了 AI 的名字,AI 在哪?在于识别分割。
所谓的抠图,是计算机视觉领域下图像分割的落地应用之一,如果要说原理,过去实现抠图大体上有两种姿势——
1、经过大量训练,分割出特定对象,比如抠人的模型,抠衣服的模型,抠动物的模型等等。
2、分割时尽可能的通用,分割后再进行微调。
当然,在实际应用中,这两种方案都是混合出现的,进而实现自动抠图的效果,但是,就在这个月的第一周,暂时搁浅元宇宙,扭头全面拥抱 AIGC 的 Meta(Facebook),发布了一个图像分割基础模型:SAM。
毫不夸张的说,这是史上首个图像分割基础模型,支持以文本、画点、滑框的方式去分割图片里的内容。
要说有什么牛🍺的地方?和 ChatGPT 一样,两个字:通用。是的,不需要额外训练,这个 SAM 模型就可以开箱即用到新的图像领域。
到底如何呢?我试了试。
官网
随着 SAM 模型的发布,Meta 在其官网,开放了一个演示用的 Demo,除了文本功能暂未开放外,你可以从这个 Demo 中体验 SAM 模型的效果,而且免翻。
官方 Demo:https://segment-anything.com/demo
虽然使用这个 Demo 无需登录,但需要勾选这个「用前须知」。
网站本身只有英文,建议搭配浏览器机翻食用,选一张例图,或者上传自己的图片,鼠标悬停变蓝之处,就是 SAM 模型自动识别出来的内容。
在「点击」模式下,鼠标左键一点就能分割出你需要的内容。
细心的小伙伴应该发现了,在鞋这里,并没有分割完整,怎么办?
很简单,未识别的地方再给它点一下,分割的内容会自动往外扩。
点了两下鼠标,这个分割就算完成了。
在「Box」模式下,我们也可以通过滑框再点击的方式,搭配起来完成快速分割。
当然,如果 SAM 识别的多了,我们可以通过鼠标右键快速排除当前不要的内容。
官方还提供了一个「Everything」的模式,可以一键自动识别图片中所有的内容。
上面就是 Meta 官方 Demo 的全部内容了,人物也好,汽车也罢,三次元也好,二次元也罢,SAM 是真的很通用。
但每次使用这个 Demo,还需要上传才行,有没有更简洁的使用方法呢?有的,在 Meta 发布 SAM 模型后,有人把它做成了扩展。
Magic Copy
Magic Copy 是一款基于 SAM 模型实现的抠图工具,对于网页中看到的任何图片,都可以通过这个浏览器扩展完成快速识别和抠图。
虽然作者说支持 Chrome 和 Firefox,不过都还在审核中,但我们可以从 GitHub 上直接下载使用。
地址:https://github.com/kevmo314/magic-copy/releases
在上面发布页下载 zip 压缩包,解压后,去浏览器扩展管理页,开启「开发者模式」后,通过「加载已解压的扩展程序」完成加载。
使用起来就简单了,对于图片右键选择扩展,然后通过鼠标点击快速分割图像,再次点击右上角的「Download」即可下载抠出来的图片。
正儿八经的说啊,这个扩展的功能是 OK 的,左上角可以查看抠图预览。
右上角可以撤回上一步操作(Undo),可以直接把抠图内容复制到剪切板(Copy),也可以直接下载(Download)。
但缺点是没办法像官网那样鼠标右键快速排除当前不要的内容,以及在分割过程中右上角的功能按键会变白.
所以实际使用过程中,需要我们多点几下鼠标,再去预览里瞅瞅看。
如果多点了,就只能凭感觉去右上角找 Undo 按钮撤回了。
除此之外都挺好的,但我发现对于本地图片,Magic Copy 这个浏览器扩展没办法使用,又不能每张图都上传图床或者上传网盘,想直接访问怎么办?
其实给本地文件安排上浏览器扩展,这招以前就和大家分享过,即我们可以利用第三方工具把本地主机变成服务器。
装机必备的 Everything 有吧,在「工具-选项」里找到 HTTP 服务器,勾选启用后,把「绑定接口」改为 127.0.0.1,「端口」用默认的 80 就行,最后记得把「服务器页面位置」改为你存放本地图片的目录,搞定。
然后在浏览器上以「127.0.0.1/文件名」打开图片,就可以让 Magic Copy 成功应用到本地图片了。
其他扩展、油猴脚本之类的,也都可以通过这种姿势访问本地文件。
用 Meta 搞出来的这个 SAM 模型抠图,优点胜在通用,缺点输在不像其他工具做了那么多的优化,所以在极为细节,比如人物毛发之类的地方,效果中规中矩。
但哪怕这样,也碾压很多免费的抠图工具了。
结语
短期内,Meta 搞出来的这个 SAM 基础模型可能不会带来更直接的影响。
但就像 Meta 发布时画的饼,这种通用模型再稍微进进步,但凡和图像识别、分割有需要的场景里,它都能派上用场。
那,SAM 模型,能不能应用到 AI 绘画中呢?答案是能的,利用 SAM 模型分割的能力,可以快速改变图片里的某一部分,比如给小姐姐穿个黑丝。
你看,除了腿,左右两张图没有一点变化,过去要很花时间,或者借助 PS 来完成局部重绘,而有了 SAM 模型,方便得多,你看这下连换装模特都省了,让穿啥就穿啥,听话得很。
关于 AI 绘画,具体的教程咱们下篇再说,至于现在,对于复杂场景下的简单抠图,相信今天的内容能带来不少的便利,感兴趣的小伙伴快去试试看吧。
这个扩展同样也是在上周的星球上分享过,类似这种东西星球上每天都发不少,都快用不过来了
QQ 群:729224889 网站:wldxh.com
微信扫码关注该文公众号作者