|
“ 大家注意:因?yàn)槲⑿抛罱指牧送扑蜋C(jī)制,經(jīng)常有小伙伴說錯(cuò)過了之前被刪的文章,比如前陣子冒著風(fēng)險(xiǎn)寫的全指南,再比如一些限時(shí)福利,錯(cuò)過了就是錯(cuò)過了。 所以建議大家加個(gè)星標(biāo),就能第一時(shí)間收到推送。??
摳圖工具大家不陌生吧,我們前后做過兩期的摳圖工具評測—— ??摳出的妹紙如此絲滑,這個(gè)免費(fèi)網(wǎng)站堪稱百里挑一 省流答案是,第一次勝出來的王者是國外的 remove.bg(無法下載高清原圖),第二次勝出來的王者是國內(nèi)的佐糖(需要登錄),我日常用的也是這倆。
但你發(fā)現(xiàn)沒有,無論是 remove.bg 也好,佐糖也罷,都在官網(wǎng)里提到了 AI 的名字,AI 在哪?在于識別分割。 所謂的摳圖,是計(jì)算機(jī)視覺領(lǐng)域下圖像分割的落地應(yīng)用之一,如果要說原理,過去實(shí)現(xiàn)摳圖大體上有兩種姿勢—— 1、經(jīng)過大量訓(xùn)練,分割出特定對象,比如摳人的模型,摳衣服的模型,摳動(dòng)物的模型等等。 2、分割時(shí)盡可能的通用,分割后再進(jìn)行微調(diào)。 當(dāng)然,在實(shí)際應(yīng)用中,這兩種方案都是混合出現(xiàn)的,進(jìn)而實(shí)現(xiàn)自動(dòng)摳圖的效果,但是,就在這個(gè)月的第一周,暫時(shí)擱淺元宇宙,扭頭全面擁抱 AIGC 的 Meta(Facebook),發(fā)布了一個(gè)圖像分割基礎(chǔ)模型:SAM。
毫不夸張的說,這是史上首個(gè)圖像分割基礎(chǔ)模型,支持以文本、畫點(diǎn)、滑框的方式去分割圖片里的內(nèi)容。 要說有什么牛??的地方?和 ChatGPT 一樣,兩個(gè)字:通用。是的,不需要額外訓(xùn)練,這個(gè) SAM 模型就可以開箱即用到新的圖像領(lǐng)域。 到底如何呢?我試了試。 官網(wǎng) 隨著 SAM 模型的發(fā)布,Meta 在其官網(wǎng),開放了一個(gè)演示用的 Demo,除了文本功能暫未開放外,你可以從這個(gè) Demo 中體驗(yàn) SAM 模型的效果,而且免翻。 官方 Demo:https:///demo 雖然使用這個(gè) Demo 無需登錄,但需要勾選這個(gè)「用前須知」。
網(wǎng)站本身只有英文,建議搭配瀏覽器機(jī)翻食用,選一張例圖,或者上傳自己的圖片,鼠標(biāo)懸停變藍(lán)之處,就是 SAM 模型自動(dòng)識別出來的內(nèi)容。
在「點(diǎn)擊」模式下,鼠標(biāo)左鍵一點(diǎn)就能分割出你需要的內(nèi)容。
細(xì)心的小伙伴應(yīng)該發(fā)現(xiàn)了,在鞋這里,并沒有分割完整,怎么辦?
很簡單,未識別的地方再給它點(diǎn)一下,分割的內(nèi)容會自動(dòng)往外擴(kuò)。
點(diǎn)了兩下鼠標(biāo),這個(gè)分割就算完成了。
在「Box」模式下,我們也可以通過滑框再點(diǎn)擊的方式,搭配起來完成快速分割。
當(dāng)然,如果 SAM 識別的多了,我們可以通過鼠標(biāo)右鍵快速排除當(dāng)前不要的內(nèi)容。
官方還提供了一個(gè)「Everything」的模式,可以一鍵自動(dòng)識別圖片中所有的內(nèi)容。
上面就是 Meta 官方 Demo 的全部內(nèi)容了,人物也好,汽車也罷,三次元也好,二次元也罷,SAM 是真的很通用。 但每次使用這個(gè) Demo,還需要上傳才行,有沒有更簡潔的使用方法呢?有的,在 Meta 發(fā)布 SAM 模型后,有人把它做成了擴(kuò)展。 Magic Copy Magic Copy 是一款基于 SAM 模型實(shí)現(xiàn)的摳圖工具,對于網(wǎng)頁中看到的任何圖片,都可以通過這個(gè)瀏覽器擴(kuò)展完成快速識別和摳圖。 雖然作者說支持 Chrome 和 Firefox,不過都還在審核中,但我們可以從 GitHub 上直接下載使用。
地址:https://github.com/kevmo314/magic-copy/releases 在上面發(fā)布頁下載 zip 壓縮包,解壓后,去瀏覽器擴(kuò)展管理頁,開啟「開發(fā)者模式」后,通過「加載已解壓的擴(kuò)展程序」完成加載。
使用起來就簡單了,對于圖片右鍵選擇擴(kuò)展,然后通過鼠標(biāo)點(diǎn)擊快速分割圖像,再次點(diǎn)擊右上角的「Download」即可下載摳出來的圖片。
正兒八經(jīng)的說啊,這個(gè)擴(kuò)展的功能是 OK 的,左上角可以查看摳圖預(yù)覽。
右上角可以撤回上一步操作(Undo),可以直接把摳圖內(nèi)容復(fù)制到剪切板(Copy),也可以直接下載(Download)。 但缺點(diǎn)是沒辦法像官網(wǎng)那樣鼠標(biāo)右鍵快速排除當(dāng)前不要的內(nèi)容,以及在分割過程中右上角的功能按鍵會變白. 所以實(shí)際使用過程中,需要我們多點(diǎn)幾下鼠標(biāo),再去預(yù)覽里瞅瞅看。
如果多點(diǎn)了,就只能憑感覺去右上角找 Undo 按鈕撤回了。
除此之外都挺好的,但我發(fā)現(xiàn)對于本地圖片,Magic Copy 這個(gè)瀏覽器擴(kuò)展沒辦法使用,又不能每張圖都上傳圖床或者上傳網(wǎng)盤,想直接訪問怎么辦? 其實(shí)給本地文件安排上瀏覽器擴(kuò)展,這招以前就和大家分享過,即我們可以利用第三方工具把本地主機(jī)變成服務(wù)器。 裝機(jī)必備的 Everything 有吧,在「工具-選項(xiàng)」里找到 HTTP 服務(wù)器,勾選啟用后,把「綁定接口」改為 127.0.0.1,「端口」用默認(rèn)的 80 就行,最后記得把「服務(wù)器頁面位置」改為你存放本地圖片的目錄,搞定。
然后在瀏覽器上以「127.0.0.1/文件名」打開圖片,就可以讓 Magic Copy 成功應(yīng)用到本地圖片了。
其他擴(kuò)展、油猴腳本之類的,也都可以通過這種姿勢訪問本地文件。 用 Meta 搞出來的這個(gè) SAM 模型摳圖,優(yōu)點(diǎn)勝在通用,缺點(diǎn)輸在不像其他工具做了那么多的優(yōu)化,所以在極為細(xì)節(jié),比如人物毛發(fā)之類的地方,效果中規(guī)中矩。 但哪怕這樣,也碾壓很多免費(fèi)的摳圖工具了。 結(jié)語 短期內(nèi),Meta 搞出來的這個(gè) SAM 基礎(chǔ)模型可能不會帶來更直接的影響。 但就像 Meta 發(fā)布時(shí)畫的餅,這種通用模型再稍微進(jìn)進(jìn)步,但凡和圖像識別、分割有需要的場景里,它都能派上用場。 那,SAM 模型,能不能應(yīng)用到 AI 繪畫中呢?答案是能的,利用 SAM 模型分割的能力,可以快速改變圖片里的某一部分,比如給小姐姐穿個(gè)黑絲。
你看,除了腿,左右兩張圖沒有一點(diǎn)變化,過去要很花時(shí)間,或者借助 PS 來完成局部重繪,而有了 SAM 模型,方便得多,你看這下連換裝模特都省了,讓穿啥就穿啥,聽話得很。 關(guān)于 AI 繪畫,具體的教程咱們下篇再說,至于現(xiàn)在,對于復(fù)雜場景下的簡單摳圖,相信今天的內(nèi)容能帶來不少的便利,感興趣的小伙伴快去試試看吧。 這個(gè)擴(kuò)展同樣也是在上周的星球上分享過,類似這種東西星球上每天都發(fā)不少,都快用不過來了
|
|
|