|
本文來自微信公眾號：量子位 （ID：QbitAI），作者：衡宇，原文標(biāo)題：《機(jī)器人反抗人類視頻爆火，背后還有AI神器加持！《頭號玩家》男主創(chuàng)業(yè)項(xiàng)目，內(nèi)測已開》 注意看，這個機(jī)器人對抗人類的視頻，在網(wǎng)上徹底火了。
圖/Wonder Dynamics推特主頁 那叫一個拳拳到肉，刺激程度引得圍觀群眾驚嘆。
圖/Wonder Dynamics推特主頁 好消息是，這個機(jī)器人并非真實(shí)存在。 但另一個不知道是好還是壞的消息是，這樣的特效，是AI一鍵合成的。就是說，從左邊這樣的人類實(shí)拍，到右邊這樣的特效畫面，人類需要做的，只是用鼠標(biāo)把模型拖到畫面里。
圖/Wonder Dynamics推特主頁 這個AI神器，名叫Wonder Studio AI。 剛發(fā)宣傳片時(shí)，就曾引發(fā)哇聲一片。在內(nèi)測名額開始發(fā)放，網(wǎng)友們上手一玩，更是停不下來，直接在社交媒體上刷了屏。 比如隨手來一段比波士頓動力還動感流暢的男團(tuán)熱舞。
圖/推特用戶@木內(nèi)翔大 或者在自個兒屋里來段Freestyle。
圖/推特用戶@Wren 上面這個作品的作者還透露，這是一個原本需要三天完成的視覺特效鏡頭，現(xiàn)在只需要1分鐘。也難怪網(wǎng)友們坐不住了。 一、無需動捕設(shè)備，一鍵生成CG動畫 有關(guān)Wonder Studio，官方的說法是，“一種可自動為CG角色制作動畫、打光，并將其合成到真實(shí)場景中的AI工具”。 按照官網(wǎng)說明，對于用戶來說，在CG動畫制作階段，你不再需要復(fù)雜的3D軟件，也不需要昂貴的動捕硬件。只需一臺用來拍攝的相機(jī)，拍好視頻后丟進(jìn)Wonder Studio處理，就足以以假亂真。 具體步驟是這樣的： 首先用相機(jī)拍攝一段視頻，視頻中，真人演員可以隨意做出任何動作； 將MP4或MOV等格式的視頻導(dǎo)入Wonder Studio，并選定需要處理的視頻段落，拖入中間區(qū)域等待處理； 點(diǎn)擊菜單欄的next按鈕，AI開始識別和分析視頻中的人物；
圖/Wonder Dynamics官網(wǎng) 選中右側(cè)選項(xiàng)欄中所需要的CG模型，拖拽至需要替換的人物區(qū)域；
圖/Wonder Dynamics官網(wǎng) 這時(shí)候會跳出一個小框，能夠根據(jù)需要調(diào)整HDR打光、畫質(zhì)清晰度、視頻格式等。
圖/Wonder Dynamics官網(wǎng) 最后，選擇解算生成，就能完成視頻段落中CG模型對真人演員的替換。 對于專業(yè)人士來說，除了最終成品，Wonder Studio還能導(dǎo)出新視頻的不同軌道，包括動作捕捉、攝像機(jī)跟蹤和空鏡等等。面對需要修改的細(xì)節(jié)，也可以直接上手微調(diào)。 傳統(tǒng)的CG制作流程，需要移除原有人物、把需要替換的CG元素導(dǎo)入引擎或Blender等軟件當(dāng)中、根據(jù)相機(jī)解算結(jié)果進(jìn)行合成、匹配燈光、渲染……最終把新的CG模型放到視頻場景中。 比較而言，用上Wonder Studio后簡化了很多工序，也難怪很多人評論，如果這個工作流跑通，是十分利好小成本影視制作的。 不過，Wonder Studio并非十全十美。主要體現(xiàn)在CG模型覆蓋原人物后，CG角色和背景銜接處處理不算優(yōu)秀。 比如會出現(xiàn)美顏瘦臉特效開太大，以至于臉部周圍背景扭曲的情況。
圖/推特用戶@Wren 而且，CG模型的邊緣像素會被拉伸，原人物的衣物等不能做到100%消除和被覆蓋。 開頭展示的爆火視頻中，其實(shí)也有不少穿幫鏡頭。
圖/Wonder Dynamics推特主頁 所以，雖然效果強(qiáng)大操作簡單，目前而言，Wonder Studio還是不能單獨(dú)放到實(shí)際項(xiàng)目中使用，否則一眼驚艷，再看露餡。 但其展示的潛能，已經(jīng)得到內(nèi)測網(wǎng)友的蓋章肯定。有內(nèi)測網(wǎng)友反饋，在他的幾次測試中，Wonder Studio能夠自動化80%的視覺特效工作。
二、《頭號玩家》創(chuàng)業(yè)項(xiàng)目 有意思的不止是產(chǎn)品，Wonder Studio背后的公司，也頗有故事。 它的出品方是一家名叫Wonder Dynamics的AI初創(chuàng)公司，致力于通過AI提高電影制作的效率和質(zhì)量。截至目前，公司在種子輪和A輪一共募集了1150萬美元融資。 Wonder Studio是他們籌備3年后，推出的一款基于AI的在線視頻特效處理平臺。 公司已經(jīng)表示，Wonder Studio后續(xù)還將繼續(xù)簡化動作捕捉和渲染環(huán)節(jié)，繼續(xù)提高制作效率。而且在公司的設(shè)想中，創(chuàng)作者在將來還能在系統(tǒng)自由上傳自己的3D模型。 再來看公司創(chuàng)始團(tuán)隊(duì)，不少人是熟面孔。比如世界聞名的導(dǎo)演斯皮爾伯格，就是這家公司的顧問。而公司創(chuàng)始人之一，是《頭號玩家》男主演泰爾·謝里丹。 不知道是說男主“干一行愛一行”好呢，還是說他“積極致力于用AI搶自己飯碗”好。
圖/Wonder Studio官網(wǎng)截圖 還有消息稱，美國導(dǎo)演組合羅素兄弟正在拍攝的一部電影中，Wonder Studio已經(jīng)參與了部分制作環(huán)節(jié)。電影主角是《怪奇物語》主演Millie Bobby Brown和《銀河護(hù)衛(wèi)隊(duì)》中星爵的扮演者Chris Pratt，電影將上線Netflix。 期待電影之前，更值得關(guān)注的一點(diǎn)是，最近這段時(shí)間，AI力量對視覺領(lǐng)域瘋狂下手了。 這就不得不提到近日在科技圈瘋狂刷屏的Meta大殺器，Segment Anything Model（SAM）。 該模型驚艷世人的能力，就是能夠識別和分離圖像及視頻中的特定對象。使用SAM，用戶可以通過單擊或輸入文字，來選中需要編輯的任何物體。 Meta在介紹SAM時(shí)寫道：
這種零樣本遷移的能力，正是GPT-4能力驚人的重要原因之一。因此，國內(nèi)外不少媒體稱SAM的發(fā)布為CV領(lǐng)域的ChatGPT時(shí)刻。 目前，SAM已經(jīng)開源，并進(jìn)一步提供了其10億掩碼數(shù)據(jù)集的完整細(xì)節(jié)。Meta官方的說法是，隨著技術(shù)發(fā)展，SAM可以成為AR、VR等更通用系統(tǒng)的強(qiáng)大組件。 聯(lián)想到今天介紹的Wonder Studio，接入SAM能力后，對原有人類圖像的分割，是不是就不再會出現(xiàn)裙角被遺漏的情況了？ 參考鏈接： [1]https://twitter.com/shota7180/status/1644815889576128512 [2]https://twitter.com/wonderdynamics/status/1644376317595615233?s=46&t=HBob6gxh8cOfZTIbieKeSA 本文來自微信公眾號：量子位 （ID：QbitAI），作者：衡宇 |
|
|
