実写とCGで作るアニメフェイススワップ
このアニメフェイススワップが最も力を発揮するのは、2枚のうち片方が写真のときです。コスプレ写真、写実的な3Dレンダー、実写の静止画に実在の顔を入れる使い方が向いています。
アニメフェイススワップは、このサイトで一番簡単な仕事のように聞こえます。実際には一番難しい仕事です。ここで動くエンジンはRunPod上のFaceFusionで、その顔の検出器と68点のランドマーク検出は、どちらも人間の顔の写真で学習しています。セル画調の顔には毛穴がなく、鼻の下に落ちる影もなく、目はスモモほどの大きさがあります。写真で作られた検出器にとって、それはしばしば顔ではありません。
だから正直な立場はこうです。アニメフェイススワップが成功するのは、2枚のうち少なくとも片方が写真のときです。実在の顔をコスプレ写真に入れれば、ターゲットには本物の頭と本物の光があるので、検出はきれいに決まります。写実的なCGレンダー同士の入れ替えでも同じ理屈が働きます。しかし手描きのセル画から別のセル画へ顔を移すよう頼めば、多くは検出の失敗か、絵の上に写真の肌が乗った継ぎ目として返ってきます。
ここにはプリセットのキャラクターも、選べるアニメ顔のライブラリもありません。ソース顔をアップロードし、ターゲット画像または動画をアップロードします。このページのアニメフェイススワップはすべて、利用者自身が持ち込んだ2つのファイルから組み立てられます。これは未完成ではなく意図的な設計です。1クリックで選べるキャラクターの名簿、そしてそれを演じる実在の人物の名簿は、この種のツールが創作から離れて醜いものへ流れていく道筋です。
このアニメフェイススワップが得意なこと
実在の顔を様式化された場面へ
最も成功率が高い流れです。写真のソース顔を、コスプレ写真、衣装のポートレート、実写の静止画に入れます。どちらの側も本物の立体構造を持つため検出器が顔を見つけ、多くは最初の試行で使える結果になります。
写実的なCGと3Dレンダー
今のキャラクターレンダー、写実的な陰影で作られたVTuberモデル、プリレンダーのカットシーン静止画は、いずれもランドマーク検出が掴めるだけの本物の顔構造を残しています。アニメフェイススワップが、様式化された素材同士の作業に最も近づけるのがここです。
動画は全フレームを処理
100MBまでのMP4を入れると、各フレームが独自の検出を受けます。頭が止まらないイベント映像やファン予告では、これが効きます。動画は30クレジットで、通常は1〜5分で完了します。
難しいターゲット向けの検出設定
様式化されたターゲットがどうしても認識されないとき、立て直す場所が詳細設定パネルです。検出スコアを下げ、検出サイズを上げ、検出の角度を追加してください。この3手は、他のすべての設定を合わせたよりも多くの境界線上のアニメフェイススワップを救います。
切っておきたい補正処理
顔補正は写真的な肌のテクスチャを作り直します。ターゲットが絵やセル画のときは、これはまさに逆効果です。フレーム補正のほうが安全です。置き換えた領域を写実へ押しやらずに、画像全体を高解像度化するからです。どちらも追加クレジットはかからず、増えるのは処理時間だけです。
アニメフェイススワップを3ステップで実行する方法
写真のソース顔をアップロードする
ソースは画像でなければならず、実在の写真であるべきです。正面を向き、両目が見え、強いフィルターがかかっていないものを選んでください。描かれたソースは、多くのアニメフェイススワップが始まる前に失敗する場所です。検出器が顔を見つけられないからです。
ターゲットをアップロードする
画像は10MBまで、動画は100MBまでです。コスプレ写真、実写の静止画、写実的なレンダーは、いずれもアニメフェイススワップでよく振る舞います。平面的な2次元のイラストだけが、決まって協力してくれない分類です。
スワップし、結果を読み、調整する
画像は10クレジットで、数秒で戻ります。まず継ぎ目と目の高さを確認してください。検出そのものが失敗した場合は、5つのパラメーターを一度に変えるのではなく、検出スコアを下げてもう一度試してください。
無料アカウントには初回に10クレジット、さらに毎日10クレジットが付与されます。どのターゲットが協力してくれるかを学ぶ間、1日1回の画像のアニメフェイススワップをこれで賄えます。
この形式が効く場面
どれも既に持っているファイルから始まり、どれもアニメフェイススワップをキャラクター生成器ではなく合成の道具として扱います。
コスプレ写真
光が思うようにならなかった撮影を仕上げる、あるいは友人が撮った衣装のポートレートに自分の顔を入れる使い方です。ターゲットが本物の光の中に立つ実在の人物なので、最も素直に動くアニメフェイススワップの仕事です。
実写化のモックアップ
スタジオはアニメ作品を実写化し続け、ファンは配役について議論し続けます。実写の静止画への置き換えは、その議論に文章ではなく画像で答えます。しかも2枚とも写真のままです。
CGとVTuber風のレンダー
写実的な3Dキャラクター、ゲームエンジンのカットシーン、写実寄りに陰影を付けたVTuberモデルは、いずれもランドマーク検出が扱える構造を残しています。この方向に寄せれば、実際に公開できる結果になります。
ファンのポスターアート
ポスターのパロディ、キービジュアルの作り直し、サムネイルの仕事では、ストックにない特定のポーズの特定の顔が必要になります。まず構図を組み、それから顔をそこへ置いてください。
様式化された構図に自分の顔を
圧倒的に多い依頼は、その場面に自分を入れてほしいというものです。ターゲットは写真か写実的なものにし、ソースは自分の実写のままにしてください。あとはアニメフェイススワップが処理します。
写真で学習した検出器と付き合う
描かれた顔がモデルを混乱させる理由
FaceFusionは写真から学んだパターンで画像の領域を採点し、勝った領域に68個のランドマークを当てます。セル画調の顔は、この2段階を同時に壊します。鼻は立体ではなく線であり、口は数ピクセルの幅しかなく、片方の目だけで頭の4分の1を占めます。だから平面的なイラストへのアニメフェイススワップは、検出なしで返ってくることが多いです。それは明らかに悪い画像ではなく静かな無反応として届くため、多くの人が戸惑います。
描かれた絵で検出が働いた場合でも、ランドマークは間違った場所に落ちがちです。モデルは人間の顎があるはずの位置に顎を置きますが、ターゲットの顎はまったく別の場所にあります。その結果、置き換えた領域は低すぎたり、広すぎたり、わずかに回転したりします。これを確実に直すパラメーターはなく、あるふりをすればクレジットが無駄になります。写真のために作られたパイプラインを、誰も学習させていない素材に向けた正直な結果です。
様式化されたターゲットに勝機を与える設定
手強いアニメフェイススワップでは、2つの設定がほとんどの仕事をします。検出スコアのしきい値を下げてモデルに弱い一致も受け入れさせ、検出サイズを上げてより高い解像度で画面を調べさせてください。頭が傾いているときは検出の角度を追加します。様式化された絵では頭が絶えず傾いています。それでも何も認識されないなら、他に触る前に別の検出モデルへ切り替えてください。検出器同士は、数値が示すより大きく意見が食い違います。
顔が見つかったら、スワップ強度を下げてください。全力のスワップは絵の中に写真の細部を流し込み、継ぎ目がはっきり見えます。弱めのブレンドは元の画風を少し残し、ずっと自然に見えます。マスクぼかしを上げて生え際をなじませ、顔補正は切ったままにしてください。写実的な毛穴を復元することは、様式化されたターゲットが求めるものの正反対です。1回の試行で変える値は1つにしなければ、どれが効いたか永遠に分かりません。
方向を選ぶ：実写から様式化へ、逆ではなく
どの単一パラメーターよりも方向が重要です。実在の写真の顔を、様式化された場面や衣装の場面へ動かす向きは機能します。ターゲットには、濃い作り込みや化粧の下にも検出器が見つけられる本物の頭の立体構造が残っているからです。入れた顔はターゲットのポーズと光を引き継ぎ、全体がまとまります。あなたが作る良いアニメフェイススワップのほとんどはこの向きに従うので、まずこれを選び、それ以外は代替案として扱ってください。
逆向き、つまり描かれた顔を持ち上げて写真に当てる方向は、期待を裏切ります。ソースは画像でなければならず、その画像が平面的なイラストの場合、検出器はしばしばそこに顔を読み取らないため、ジョブが始まりません。始まったとしても、誰もが知るキャラクターではなく、なめされた近似が返ってきます。逆向きのアニメフェイススワップは計画ではなく実験として扱い、写真のソースを控えに用意しておいてください。
クレジットを使う前に
このページで期待を下回る結果の多くは、モデルの失敗ではなく素材の失敗です。エンジンがアップロードごとに黙って悪くなることはありません。変わるのは、どれだけ本物の顔の構造を渡したかです。アニメフェイススワップのターゲットは、通常ポートレートよりその構造が少ないのです。
まずこのリストを確認してください。15秒で済み、アニメフェイススワップではサイトのどこよりも多くの無駄な試行を防げます。ここでの失敗の形は、多くの場合そもそも起きなかった検出だからです。
- ソース顔は実在の写真で、正面を向き、鮮明である
- ターゲットが本物の頭の立体構造を持つ：コスプレ、実写、写実的なCG
- 様式化されたターゲットでは検出スコアを下げ、検出サイズを上げた
- 画風を尊重するようにスワップ強度を下げた
- ターゲットが本当に写真的でない限り、顔補正は切ってある
- ターゲットのファイルは画像なら10MB未満、動画なら100MB未満である
様式化された作業のための規則
このページにキャラクターの名簿はなく、実在の人物のライブラリもありません。今後も作りません。ソース顔は利用者が用意するので、その責任を負うのは利用者です。実在の人物の肖像から作る性的な内容は、本人の同意がなければ明確に禁止します。そしてここで最も重要な一線があります。未成年に見えるキャラクターや顔が関わる性的な内容は、絶対に禁止です。様式化された絵は抜け道ではありません。ターゲットが絵だったからといって、アニメフェイススワップが許容されるようになることはありません。
実際には起きていない出来事の、未編集の本物の写真や記録として通用させるために作った出力も禁止します。パロディ、批評、ファン作品、コスプレや制作の素材、そして自分自身の肖像は歓迎しますし、編集した作品は編集済みと明示して世に出してください。架空のキャラクターに与えられる同意はありませんが、そのキャラクターをコスプレし、声を当て、モデルを務める実在の人々には確かに同意があります。肖像権とパブリシティ権、そして同意のない性的画像に関する法律は、実際の罰則を伴います。悪用したアカウントは利用資格を失い、写っている本人からの削除要請には私たちは必ず応じます。
アニメフェイススワップのよくある質問
2次元から2次元への入れ替えは動きますか？
多くの場合は動きません。はっきり書くほうが誠実です。検出器とランドマーク検出は写真から学習しているため、手描きやセル画調の顔はそもそも顔として認識されないことが多く、認識された場合もランドマークの位置がずれます。平面的な2次元のアニメフェイススワップは実験です。写真や写実的なターゲットが頼れる道です。
費用はどれくらいですか？
画像は10クレジット、動画は30クレジットです。すべてのアカウントに初回10クレジット、さらに毎日10クレジットが付与されるので、静止画の入れ替えは毎日無料で試せます。どのプランでもウォーターマークは入りません。
どんなターゲットが最も良いアニメフェイススワップになりますか？
順番に、コスプレ写真、実写の静止画、写実的な3DとCGのレンダー、そして大きく離れた最後に濃く様式化された絵です。ターゲットが本物の頭の構造を多く持つほど、検出器は確実に掴み、ブレンドはきれいになります。
キャラクターはツールに内蔵されていますか？
いいえ。プリセットも、キャラクターのサムネイルも、いかなる顔のライブラリもありません。ソース顔とターゲットは利用者が自分でアップロードします。これは未実装の機能ではなく、設計上の判断です。
顔補正は有効にすべきですか？
様式化されたターゲットでは、通常は不要です。置き換えた領域の中に写真的な肌のテクスチャを復元するため、絵やセル画の見た目と衝突し、継ぎ目が目立ちます。フレーム補正のほうが安全です。画面全体を等しく扱うからです。どちらも追加クレジットはかからず、増えるのは時間だけです。
動画のアニメフェイススワップにはどれくらい時間がかかりますか？
多くのクリップで1〜5分です。所要時間は主に長さとフレームレートで決まります。各フレームが独自の検出とブレンドを受けるからです。ページは実行中ずっと3秒ごとに状態を確認し、15分で打ち切るため、長い映像は先にトリミングしてください。
架空のキャラクターを入れ替えるのは合法ですか？
キャラクター自身に与えられる同意はありませんが、その絵には著作権が及びますし、そのキャラクターをコスプレし、声を当て、モデルを務める実在の人々には肖像権があります。パロディと批評は多くの国で広く保護されています。実在の人物の同意のない性的画像は、意味のあるどの国でも保護されません。
その他のフェイススワップツール
このアニメフェイススワップと同じエンジンを、別の種類の素材に合わせたものです。