LivePortrait 紹介

LivePortraitは、ポートレートをアニメーション化するために2段階のプロセスを採用しています。第一段階では、外観とモーション抽出器を使用して、ソース画像と希望するモーションの本質を捉えます。その後、ワーピングモジュールとデコーダが連携して初期アニメーションを生成します。第二段階では、LivePortraitはステッチングとリターゲティングモジュールを使用してアニメーションを改良し、表情や頭部のポーズを正確にコントロールできるようにします。ユーザーはプリセットのモーションテンプレートから選択するか、カスタムドライビングビデオをアップロードしてアニメーションをガイドできます。このシステムは、SPADEデコーダやPixelShuffleアップサンプリングなどの高度な技術を活用して、高解像度で詳細なアニメーションを効率的に生成します。