大家好，今天給大家分享一款換臉工具——FaceFusion，這款工具新版本相對(duì)舊版增加了很多模型和高清算法，大大提高了圖片和視頻的換臉效果。同時(shí)還增加了三種遮罩功能，解決了臉部有物體遮擋時(shí)融合效果差和跳閃的問(wèn)題。首先介紹如何在本地安裝，然后演示最常用的換臉流程和設(shè)置。第三部分詳細(xì)介紹遮罩功能，并演示不同遮罩的用法。

2024年05月23日10:28:36更新
2.6.0版本
2.6.0版本更新

安裝

一鍵整合包獲取

關(guān)注公眾號(hào):嘟嘟實(shí)驗(yàn)室

公眾號(hào)發(fā)送:FaceFusion

使用教程

解壓整合包，雙擊啟動(dòng)整合包.exe

進(jìn)入CMD界面，稍等待一段時(shí)間。

待程序打開(kāi)后這就是主界面

先簡(jiǎn)單介紹下幾個(gè)常用設(shè)置。

幀處理器

來(lái)到幀處理器這里，我們可以看到四個(gè)選項(xiàng)：

第一個(gè)選項(xiàng)是face_swapper（換臉模式）默認(rèn)是勾選的，否則就無(wú)法進(jìn)行換臉。

第二個(gè)選項(xiàng)是face_debugger（調(diào)試模式）用來(lái)開(kāi)啟遮罩時(shí)調(diào)試用的。正常換臉時(shí)不需要勾選。

第三個(gè)是face_enhancer（臉部增強(qiáng)）比較常用，開(kāi)啟后可以提升轉(zhuǎn)換后的視頻中人物面部的清晰度。

第四個(gè)是frame_enhancer（畫(huà)面增強(qiáng)）比較常用，開(kāi)啟后可以提升轉(zhuǎn)換后的視頻整體清晰度。（此選項(xiàng)會(huì)大大增加處理時(shí)間，根據(jù)你的硬件酌情勾選）

面部交換器模型

下拉列表是選擇換臉模型。

• inswapper_128和inswapper_128_fp16

默認(rèn)的是inswapper_128_fp16，這個(gè)模型已經(jīng)能處理絕大部分換臉場(chǎng)景了。
128指的是處理的圖像分辨率為128x128像素。fp16指的是該模型使用16位浮點(diǎn)數(shù)（FP16）進(jìn)行計(jì)算，這通常意味著它在保持足夠精度的同時(shí)，能夠減少計(jì)算資源的需求，加快處理速度，特別適用于資源有限的環(huán)境或需要實(shí)時(shí)處理的應(yīng)用。

• blendswap_256

這個(gè)模型可能專(zhuān)注于將兩張圖像中的面孔進(jìn)行混合和交換，256表示模型工作的圖像分辨率或輸出分辨率是256x256像素。這種分辨率適合于較小的圖像和需要快速處理的應(yīng)用。

• simswap_256

這個(gè)模型采用了相似性交換算法，256指的是模型處理的分辨率為256x256像素。這種模型在保持原圖像質(zhì)量的同時(shí)，能夠?qū)崿F(xiàn)高質(zhì)量的面部交換效果。

• simswap_512_unofficial

這個(gè)模型與simswap_256相似，512表明這個(gè)版本的模型支持更高的分辨率，即512x512像素，能夠生成更高清晰度的面部交換結(jié)果。unofficial表示這個(gè)版本不是官方發(fā)布的,是社區(qū)成員基于原始模型進(jìn)行的修改或擴(kuò)展。

結(jié)合自身項(xiàng)目情況選擇不同的模型。使用16位浮點(diǎn)數(shù)（如inswapper_128_fp16）是一種優(yōu)化技術(shù)，可在不顯著影響輸出質(zhì)量的情況下加速模型運(yùn)行。更高的分辨率（如simswap_512）能夠提供更細(xì)膩的細(xì)節(jié)，但也需要更多的計(jì)算資源和處理時(shí)間。

執(zhí)行程序模式選擇

這里有三個(gè)選項(xiàng)，如果你是N卡，選擇Cuda，如果你是A卡或者集成顯卡，選擇CPU。

執(zhí)行線程數(shù)

這個(gè)根據(jù)你的GPU硬件來(lái)調(diào)節(jié)，如果你是8G以下顯存，保持默認(rèn)。如果你有8G以上顯存，可以調(diào)高至8-10。（根據(jù)情況來(lái)，這里只是參考）

執(zhí)行隊(duì)列數(shù)

執(zhí)行隊(duì)列數(shù)這個(gè)參數(shù)是用腳本執(zhí)行批量換臉時(shí)才使用，在網(wǎng)頁(yè)上操作不用設(shè)置，這里保持默認(rèn)即可。

視頻內(nèi)存策略、系統(tǒng)內(nèi)存限制

這里也不需要進(jìn)行調(diào)整，保持默認(rèn)，由程序自行控制。

輸出路徑

這個(gè)路徑是程序執(zhí)行換臉過(guò)程中存放臨時(shí)圖片的位置，換完后程序會(huì)自動(dòng)清除，無(wú)需改動(dòng)。

常見(jiàn)選項(xiàng)

• keep-temp

不建議勾選。這個(gè)選中以后，換臉后產(chǎn)生的臨時(shí)圖片就會(huì)保存到上面設(shè)置的臨時(shí)目錄里，很占硬盤(pán)空間。

• skip-audio

跳過(guò)音頻處理，輸出后的視頻無(wú)音頻。

• skip-download

建議勾選。跳過(guò)下載，我們的模型都已經(jīng)下載好了，可以勾選此選項(xiàng)跳過(guò)下載檢查步驟。

簡(jiǎn)單換臉

點(diǎn)擊源文件，選擇一張人臉照片，最好是正面照，并且清晰臉部不能遮擋。

再點(diǎn)擊目標(biāo)文件，選擇要替換的圖片或者視頻。

右側(cè)頂部就是預(yù)覽區(qū)，下面這些設(shè)置一會(huì)再詳細(xì)介紹，單張圖片換臉基本用不上，點(diǎn)擊 start 按鈕替換，替換好以后點(diǎn)擊這里下載就能保存到電腦上。

如果想要更清晰的效果，勾選臉部增強(qiáng)，再點(diǎn)擊 start 替換一次。

以上就是最簡(jiǎn)單的單張臉替換流程。

多人換臉

面部選擇器模式

• reference

默認(rèn)模式,從左向右檢測(cè)人臉并替換檢測(cè)到的第一個(gè)檢測(cè)到的人臉會(huì)在這里列出。如果要改變替換的人，點(diǎn)擊對(duì)應(yīng)的人臉圖標(biāo)就可以了。

• one

one模式只會(huì)替換檢測(cè)到的第一個(gè)人臉。

• many

many模式會(huì)替換檢測(cè)到的所有人臉

參考面部距離參數(shù)

大部分情況下用默認(rèn)值 0.6 就可以。除非識(shí)別不出人臉時(shí)，比如視頻里如果有一些角度較大的低頭側(cè)臉的鏡頭，檢測(cè)出的人臉匹配度很低，就可以把它調(diào)大。

遮罩換臉

比如這張圖片，臉部有物體遮擋的，就需要選擇恰當(dāng)?shù)恼谡帜Ｊ剑拍苓_(dá)到更好的面部融合效果。

使用遮罩時(shí)建議開(kāi)啟調(diào)試模式。預(yù)覽畫(huà)面里的紅框就是程序默認(rèn)的 box 模式的遮罩。

可以看到口罩部分會(huì)露出人臉，我們需要對(duì)這個(gè)進(jìn)行處理。
勾選第二個(gè)遮罩模式

可以看到

這個(gè)模式下計(jì)算了剩下的面部范圍（紅框部分）

遮罩模糊

默認(rèn)是0.3，它是調(diào)節(jié)遮擋物體的透明度，如果不是透明物體，可以調(diào)到 0.5 以上。執(zhí)行前一定要先關(guān)閉face_debugger調(diào)試選項(xiàng)，防止換完的視頻臉部就會(huì)遮到曲線。提醒一下，使用封閉遮罩模式，遮罩模糊值具體設(shè)置成多少合適，可能需要多次嘗試才行。不過(guò)這個(gè)值也不是越大越好，對(duì)于透明物體，比如眼鏡、玻璃杯、調(diào)小這個(gè)值反而有更真實(shí)的融合效果。

region臉部區(qū)域模式

這里勾選region以后，下面會(huì)出現(xiàn)兩排參數(shù)，包括眉毛、鼻子、眼睛、嘴巴等部位，默認(rèn)是全部勾選上的，就是這些部位默認(rèn)會(huì)全部替換掉，如果不想替換掉原視頻里臉上的某個(gè)部位就可以不勾選。

以上就是FaceFusion的使用方法，感謝你的閱讀。