動漫換臉:用真實照片和 CG 來做
我們的動漫換臉在配對裡至少有一邊是照片時表現最好:把真人臉放進 cosplay 照片、寫實 3D 渲染,或者真人實拍的靜態畫面。
AI 換臉效果示例
一張清晰的人臉照片,一張目標照片,大約十秒出結果。以下都是上方同一個引擎生成的原始結果,沒有修圖。
原圖
換臉後
原圖
換臉後
原圖
換臉後
原圖
換臉後
原圖
換臉後
原圖
換臉後
示例中的所有人物均由 AI 生成,現實中並不存在。
動漫換臉聽起來像是本站最容易的活兒。實際上它最難。我們的處理引擎主要針對照片中的真實臉部結構最佳化。賽璐璐上色的臉沒有毛孔,鼻子下面沒有投影,眼睛大得像李子。對一個建立在照片上的偵測器來說,那經常根本不算一張臉。
所以誠實的說法是這樣:動漫換臉要成功,配對裡至少有一邊必須是照片。把真人臉放進 cosplay 照片,目標就有真實的頭部和真實的光線,偵測落得乾淨。在兩張寫實 CG 渲染之間互換,道理一樣成立。而如果你要模型把一張臉從一張手繪賽璐璐挪到另一張上,通常得到的是偵測失敗,或者一塊照片質感的皮膚壓在一幅畫上面。
這裡沒有預置角色,也沒有可供挑選的動漫人臉庫。來源人臉由你上傳,目標由你上傳,本頁每一次動漫換臉都由你自己帶來的兩個檔案拼成。這是刻意的設計,不是沒做完。一份一鍵可選的角色名冊,以及扮演這些角色的真人名冊,正是這類工具從創作滑向更難看的東西的方式。
動漫換臉擅長的是什麼
把真人臉放進風格化畫面
命中率最高的做法:把一張照片來源人臉放進 cosplay 照片、服裝肖像或真人實拍靜態畫面。兩邊都帶著真實的幾何結構,所以偵測器找得到,動漫換臉第一次就能出可用的結果。
寫實 CG 與 3D 渲染
現代角色渲染、用寫實著色做的虛擬主播模型、以及預渲染的過場靜態畫面,都保留了足夠的真實臉部結構,讓關鍵點模型鎖得住。這是動漫換臉最接近真正風格化對風格化的場合。
影片裡的每一幀
喂進最大 100MB 的 MP4,每一幀都會單獨做一次偵測,這在漫展素材和粉絲預告裡很關鍵,因為那裡的頭一刻不停。影片動漫換臉花 20 點數,通常 1 到 5 分鐘完成。
對付難目標的偵測器控制元件
當一個風格化目標死活不肯被認出來時,進階選項面板就是你救它的地方。把偵測門檻值調低,把偵測尺寸調大,再加上額外的偵測角度。這三招救回來的臨界動漫換臉案例,比其餘所有設定加起來都多。
可能應該關掉的增強開關
臉部增強重建的是照片質感的皮膚,而當目標是繪製或賽璐璐上色的畫面時,這恰恰是錯的。畫面增強安全一些,因為它把整張圖放大,不會把換臉區域往寫實方向推。兩者都不額外收點數,只多花處理時間。
三步做完一次動漫換臉
上傳一張照片來源人臉
來源人臉必須是圖片,而且應該是一張真實照片:正面、兩隻眼睛可見、沒有重濾鏡。繪製的來源人臉是多數動漫換臉嘗試還沒開始就死掉的地方,因為偵測器根本找不到臉。
上傳目標
圖片最大 10MB,影片最大 100MB。cosplay 攝影、真人實拍靜態畫面和寫實渲染在動漫換臉裡都表現良好。扁平的二維畫作是唯一經常不肯配合的類別。
換、讀結果、再調
一次圖片動漫換臉花 15 點數,幾秒就落地。先看接縫和眼線。如果偵測乾脆失敗了,就把偵測門檻值調低再試一次,不要一次改五個參數。
開啟工具就有 15 點數,只發一次,不用註冊,也不用電子郵件信箱;註冊免費帳號後每天可領取 10 簽到點數,可用於任意換臉,有效期限至 UTC 00:00。開局的 15 點數夠你完整地做一次圖片動漫換臉——影片要 20 點數,需要購買點數——所以第一次嘗試就挑一個你覺得好說話的目標。
這個格式在哪裡最划算
下面每一件事都從你已經擁有的檔案開始,也每一件都把動漫換臉當作合成工具,而不是角色生成器。
cosplay 攝影
把一次被光線拖了後腿的拍攝收個尾,或者把自己的臉放進朋友拍的服裝肖像裡。這是最好說話的動漫換臉活兒,因為目標是一個站在真實光線裡的真人。
真人版改編試想
片方一直在改編動畫作品,粉絲也一直在為選角吵架。把臉換到一張真人實拍靜態畫面上,用一張圖片回答爭論,比一段文字有力,而且配對的兩邊都還是照片。
CG 與虛擬主播風格渲染
寫實 3D 角色、引擎過場截圖、以及為寫實而著色的虛擬主播模型,都給關鍵點模型留下了足夠的結構。把動漫換臉推向這個方向,你能得到真的可以拿出去用的成品。
同人海報
海報戲仿、主視覺翻做和縮圖活兒,常常需要素材庫裡沒有的某張臉擺出某個特定姿態。先把構圖搭好,再把臉放進去。
把自己的臉放進風格化畫面
遙遙領先的第一大需求:把我放進那個場景裡。目標保持照片或寫實渲染,來源人臉保持你自己的真實照片,剩下的動漫換臉會處理好。
跟一個在照片上訓練出來的偵測器打交道
繪製的臉為什麼會讓模型犯迷糊
處理引擎會先在畫面中定位人臉區域,再擬合用於對齊的關鍵位置。賽璐璐上色的臉把這兩步一起打斷。鼻子是一條線而不是一個體,嘴可能只有幾像素寬,一隻眼睛佔掉四分之一個頭骨。所以扁平畫作上的動漫換臉常常乾脆沒有任何偵測結果,而它到達你面前的方式是一片沉默,不是一張明顯很糟的圖,這正是讓人困惑的地方。
而當偵測真的在繪製畫作上觸發了,關鍵點往往落錯位置。模型把下頜放在人類下頜該在的地方,而目標的下巴完全在別處,於是換臉區域偏低、偏寬或者略微旋轉。沒有哪個參數能可靠地修好這件事,硬裝能修只是白花點數。把一條照片流程的動漫換臉對準沒人拿它訓練過的素材,這就是誠實的後果。
給風格化目標一個機會的那些設定
在一個難纏的動漫換臉上,兩個控制元件做了大部分工作。把偵測門檻值調低,讓模型接受更弱的匹配;把偵測尺寸調大,讓它在更高解析度上審視畫面。頭是歪的就加偵測角度,而風格化畫作一直在歪頭。如果這樣之後仍然什麼都沒認出來,先換一個偵測器模型,再動別的,因為偵測器之間的分歧比它們的參數看起來要大得多。
臉一旦被找到,就把換臉權重降下來。全強度的換臉會把照片細節倒進一幅繪製畫面裡,接縫立刻顯形;而更溫和的融合保留了一部分原有風格,看起來好得多。把遮罩羽化提高來軟化髮際線,並讓臉部增強保持關閉,因為恢復寫實毛孔正好和風格化目標想要的相反。每次只改一個數值,否則你永遠不知道是哪一個起了作用。
選對方向:真人進風格化,不是反過來
方向比任何單個參數都重要。把一張真實照片的臉放進風格化或有服裝造型的畫面裡之所以行得通,是因為目標仍然保有真實的頭部幾何供偵測器去找,哪怕上面蓋著濃重的造型和妝。換過去的臉隨後繼承目標的姿態和光線,整件事就站得住。你能做出來的好動漫換臉裡,幾乎每一個都走這個方向,所以先伸手去拿它,把其他一切當作退路。
反過來,把一張繪製的臉取出來貼到照片上,是那個讓人失望的方向。來源人臉必須是圖片,而當這張圖片是扁平畫作時,偵測器經常讀不出臉,任務於是根本不會開始。就算開始了,你拿到的也是一個被磨平的近似,而不是誰都認得出的那個角色。把反向的動漫換臉當成一次實驗,而不是一個計劃,並且隨手備好一張照片來源人臉。
花點數之前
本頁多數讓人失望的結果不是模型失敗,而是素材失敗。引擎不會在兩次上傳之間悄悄變差。變的是你遞給它多少真實的臉部結構,而一個動漫換臉目標攜帶的這類結構,通常比一張肖像少。
先把這張清單走一遍。它只要十五秒,而在動漫換臉上它省下的白跑次數比本站任何地方都多,因為這裡的失敗方式常常是一次根本沒有發生過的偵測。
- 來源人臉是真實照片,正面且清晰
- 目標帶著真實的頭部幾何:cosplay、真人實拍或寫實 CG
- 面對風格化目標,偵測門檻值已調低、偵測尺寸已調大
- 換臉權重已降低,讓融合尊重畫面的美術風格
- 除非目標確實是照片,否則臉部增強保持關閉
- 目標檔案圖片小於 10MB,影片小於 100MB
風格化創作的規矩
本頁沒有預置的角色名冊,也沒有真人庫,以後也不會有。來源人臉由你自己上傳,所以由你自己負責。用真人肖像製作性內容、且未取得本人同意,一律禁止;而這裡最要緊的一條是:任何涉及看起來像未成年人的角色或人臉的性內容,絕對禁止。風格化的美術不是漏洞,一次動漫換臉不會因為目標恰好是畫出來的就變得可以接受。
把成品做成看似真實、未經編輯的照片或錄影,用來講一件從未發生的事,同樣禁止。戲仿、評論、粉絲作品、cosplay 與製作素材,以及你自己的肖像,都是歡迎的,而編輯過的媒體離開你手裡時應當標註為已編輯。虛構角色沒有同意可以給,但扮演、配音和為這個角色做模特的真人當然有。肖像權與公開形象權,加上非自願私密影像相關法規,都帶著實打實的處罰。濫用的帳號會被停止存取,我們也會回應被描繪者提出的刪除請求。
動漫換臉常見問題
純二維的動漫之間互換能成嗎?
通常不行,把這句話說明白更好。偵測器和關鍵點模型都是從照片裡學的,所以一張手繪或賽璐璐上色的臉經常被判定為根本不是臉,而當它真的被認出來時,關鍵點又落得很差。扁平二維的動漫換臉是一次實驗。照片和寫實渲染類目標才是可靠的路線。
多少錢?
圖片 15 點數,影片 20 點數。開啟工具的那一刻就有 15 點數,只發一次,不用註冊,夠你用付費使用者同款引擎試一次全解析度的靜態圖換臉。註冊免費帳號後每天可領取 10 簽到點數,可用於任意換臉,有效期限至 UTC 00:00,可以和購買的點數合併使用,圖片和影片都行,所以持續使用就需要付費方案或點數包。任意一次購買後可以關掉浮水印。
哪些目標做出來的動漫換臉效果最好?
按順序:cosplay 攝影、真人實拍靜態畫面、寫實 3D 與 CG 渲染,重度風格化的繪畫遠遠排在最後。目標保有的真實頭部結構越多,偵測器鎖得越穩,融合也越乾淨。
工具裡內建角色嗎?
沒有。沒有預設、沒有角色縮圖、也沒有任何形式的人臉庫。來源人臉和目標都由你自己上傳。這是一個設計決定,不是還沒做出來的功能。
臉部增強要開啟嗎?
面對風格化目標通常不要。它會在換臉區域內恢復照片質感的皮膚紋理,這和繪製或賽璐璐上色的觀感打架,還會讓接縫更吵。畫面增強安全一些,因為它平等地處理整個畫面。兩者都不額外收點數,只多花時間。
一次影片動漫換臉要多久?
多數片段 1 到 5 分鐘,主要由長度和影格速率決定,因為每一幀都要單獨做偵測和融合。頁面在執行期間每 3 秒輪詢一次,15 分鐘後放棄等待,所以很長的素材先裁一下。
給虛構角色換臉合法嗎?
角色本身沒有同意可以給,但美術作品仍然受著作權保護,而扮演、配音或為這個角色做模特的真人持有肖像權。戲仿和評論在許多國家受到廣泛保護。未經同意的真人性影像,在任何有意義的地方都不受保護。