実写動画からMetaHumanのフェイスアニメーションを作成する方法です。
何ができる？
.mp4ファイルらの実写動画からMetaHumanのフェイスアニメーションが作成できます。
エンジンVerと必要素材
- エンジンVer: Unreal Engine 5.8.0
- 必要素材: リグ作成済のMetaHumanキャラクター
- 必要素材: お喋りしている実写動画
今回使用したMetaHumanキャラクターはFabで販売しています。
Natsu – UE5.8 Japanese Female MetaHuman Character | Fab
エンジンにMetaHuman Creatorコアデータをインストールする
エンジンのインストールオプションでMetaHuman Creatorコアデータにチェックを入れてインストールしましょう。
MetaHumanとLive Link関連プラグインを有効化する
Unreal Engineのプロジェクトを開く。
編集 > プラグイン を開く。
MetaHuman関連のプラグイン全てを有効化する
検索欄に「MetaHuman」と入力して、ヒットしたプラグインに全てチェックを入れる。
Live Linkプラグイン3種が有効化されているか確認する
Live Link、Live Link Control Rig、Live Link Hubも有効化します。
Unreal Engine 5.8ではデフォルトで3種とも有効化されているはずです。
検索欄に「Live Link」と入力してLive Link、Live Link Control Rig、Live Link Hubにチェックが入っているか確認しましょう。
新規でチェックを入れたプラグインは再起動する事で有効化されます。
Live Linkハブ
ツール > ライブ リンクHub を開く。
ライブデータ をクリックして キャプチャマネージャー に変更する。
データ仕掛け > +追加 > Mono Video Ingest をクリック。
Mono Video Ing を選択状態にする。
詳細のテイクディレクトリの … をクリックして動画があるフォルダを指定する。
テイクブラウザに動画のサムネイルが表示されるので、使用する動画を選択する。
+キューに追加 をクリック。
ジョブリストに動画が追加されます。
動画の向きが違う場合、ジョブの詳細の 動画 > 画像回転 で回転可能です。時計回りで90度など。
開始 をクリックすると、コンテンツブラウザにフォルダが作成されてFootage Capture Dataが作成されます。
ライブ リンクHubは閉じて構いません。
MetaHumanパフォーマンス
コンテンツブラウザで右クリックして MetaHuman > MetaHumanパフォーマンス を選択。
作成したMetaHumanパフォーマンスを開く。
詳細の、
Input TypeがMonocular Footageである事を確認。
Footage Capture DataはLive Linkハブで作成した物を指定。
Visualization ObjectはMetaHumanキャラクターのFaceMeshを指定。
Head Movement ModeをControl Rigにする。
左上の プロセス をクリックするとアニメーションが作成されます。
動作に問題がなければ、プロセスの右にある Export Animation (アニメーションのエクスポート) をクリック。
保存するフォルダを指定した後、エクスポート設定ウィンドウが開きます。
Target Skeleton or Sleletal Meshは、MetaHumanのFace_Archetype_SkeletonかMetaHumanキャラクターのFaceMeshを指定しましょう。
私はMetaHumanのFace_Archetype_Skeletonにしました。
動作テスト
MetaHumanキャラクターを開く。
リグが作成済であれば、プレビュー設定のアニメーションを指定できます。
Face Animation TypeをSpecific Animationにする。
Face Spacific Animationに先ほどエクスポートしたアニメーションを指定する。
画面下の再生ボタンをクリック。
非常に素晴らしいです。
初心者が大手のゲームと遜色ないレベルのキャラクターとフェイスアニメーションを簡単に作成できてしまう。
MetaHuman自体が高品質ですし、フェイスアニメーションも高品質な仕上がりで満足です。
コメント