FaceFusion 3.0.1はげんざいのさいしんばんで、これまでの3.0ばんにあったおおくのもんだいをしゅうせいし、ソフトのあんていせいをおおきくこうじょうしました。"かおがえじんき"さんけんきゃくのひとつとして、ゆうめいなRoopやRopeとふかくかんけいしています。FaceFusionはRoopのコアきのうをつぐだけでなく、よりきょうりょくなよこがおかおがえのさいてきかと、よりおおくのパラメータちょうせつきのうをくわえ、ユーザーたいけんをさらにたかめました。さらに、ライブはいしんちゅうのリアルタイムかおがえにもたいおうし、クリエイターにさらにおおくのあそびをていきょうします。
1. ごかんいれかえをフレキシブルにせんたく
顔全体の置き換えに限定されず、ユーザーは目、口、鼻だけを置き換え、細かな調整を簡単に行い、より自然な効果を生み出せます。
2. ワンクリックでデジタルヒューマンを作成
先進的なwav2lip技術により、ユーザーは音声をアップロードするだけで、人物の口の動きを合わせ、デジタルキャラクターを素早く生成できます。
3. より強力な顔交換モデル
新バージョンは顔編集、年齢調整、まったく新しい顔検出技術に対応し、GHOST顔交換モデルと組み合わせることで、効果がよりリアルになります。
4. ライブ配信リアルタイム顔交換
FaceFusionのリアルタイム顔交換機能は、ライブ配信中に自然な身分切り替えを可能にし、インタラクションの面白さを大きく高めます。

3.0.1バージョンの更新
– 多くの既知の問題を修正し、3.0バージョンのバグを解決;
– 異常が起きたユーザーはこのバージョンに更新することで、より安定した体験が得られます。
3.0バージョンの更新
– まったく新しいアーキテクチャ設計、ピクセル強調機能を導入;
– 多角度の顔検出に対応;
– 年齢修飾子と顔編集機能を追加;
– GHOSTモデル、SimSwapモデルなど、複数の顔交換モデルと強調モデルを発表;
– CUDA 12.4、TensorRT 10.4などの最新技術に対応。
1. 映画制作
リアルで自然な顔の置き換え効果を提供し、リアルな特殊効果を生み出します。
2. ゲーム開発
キャラクターの表情を豊かにし、プレイヤーにさらに没入できるインタラクション体験をもたらします。
3. SNS作品制作
ユーザーは顔変換技術でユニークなコンテンツを作り、より多くの注目を集められます。
1. 画像と動画をアップロードし、置き換えモード(顔置き換え、高精細化など)を選びます。
2. 運用方式(CPUまたはCUDA)を設定し、グラフィックボードの性能に応じてスレッド数を調整します。
3. 処理を開始すると、生成された結果を指定パスで確認し、ダウンロードできます。
- OS: Windows 10/11 64ビット
– ハードウェア: CUDA対応のNVIDIAグラフィックボード、またはCPUでの運用
– 必要ソフト: CUDAとcuDNNをインストールし、バージョンが要求にかなっていることを確認
3.0は変更が大きいため、今回は完全パッケージのみ提供します。ワンクリックパッケージ(FaceFusion-3.0.1)とモデルパッケージ(.assets)の2部分があります。まずワンクリックパッケージをダウンロードして解凍し、次にモデルパッケージをダウンロードしてワンクリックパッケージのルートディレクトリに置き、現在のフォルダに解凍するだけです。
tensorrtに対応し、tensorrtはビデオメモリの使用がより少ないです。tensorrtモードでエラーが出る場合は、cudaで処理することもできます。
01. face_swapper(顔置き換え)、face_enhancer(顔高精細化)を選択し、frame_enhancer(画面高精細化)は必要に応じてチェックします。オンにすると変換後の動画全体のはっきり度を高められます。face_debugger(デバッグモード)はマスクをオンにするときのデバッグ用で、通常の使用ではチェック不要です。
運用方式を選びます。グラフィックボードで運用するときはcuda、CPUで運用するときはCPUを選びます。
実行スレッド数はグラフィックボードの性能に合わせて調整します。スレッド数が高いほど演算速度は速くなりますが、グラフィックボードの性能が不足な場合はエラーになります。デフォルトのままをすすめます。
顔の画像をアップロードし、置き換えたい動画または画像をアップロードし、マスクは"occlusion"の自動マスクを選び、最後に"START"をクリックすれば開始です。ここで注意: 画像と動画のフォルダパスおよびファイル名に中国語を用いないほうがよいです。そうでないとエラーになることがあります。

02. 生成結果は一時保存パスにあります。再生をクリックすると効果を確認でき、右上の"ダウンロードボタン"をクリックすると指定フォルダに保存できます。

03. 3.0.0バージョンで追加された表情制御機能です。"face_editor"の顔編集オプションを開くと、下で各顔の数値を調整できます。たとえば口の開き比率を0.5に調整すると、右のプレビューで口がはっきり開くのがわかります。
注意: 操作画面は中国語化(翻訳)されていませんが、各ブラウザ標準の翻訳機能で翻訳でき、確認に便利です。

詳しい情報とオープンソースアドレス:[GitHub – FaceFusion]