HyperAI超神経

LivePortrait Kuaishou オープンソース Tusheng Video Digital Human デモ

LivePortrait はオリジナル画像 1 枚だけでダイナミックなビデオを生成できます

チュートリアルの紹介

このチュートリアルは、LivePortrait の最新バージョンのワンクリック実行デモです。クローンを作成してワンクリックで開始することで、関連する環境と依存関係がインストールされています。

LivePortrait は、Kuaishou Keling Model Team によってオープンソース化されており、その主な機能には、1 つの画像からの鮮やかなアニメーションの生成、目と唇の動きの正確な制御、複数のポートレートのシームレスな接合処理、マルチスタイルのポートレートのサポート、高解像度アニメーションの生成などが含まれます。 。このプロジェクトでは、暗黙的キー ポイント フレームワークに基づく AI ポートレート アニメーション生成フレームワークを使用します。ビデオを駆動する表情やジェスチャーを静的または動的なポートレートに転送し、表現力の高いビデオを作成できます。

最新バージョンでは、正確なポートレート編集やビデオ編集など、多くの興味深い機能が追加されました。

実行メソッド

1. コンテナーを複製して起動した後、生成された API アドレスをブラウザーにコピーして、Gradio インターフェイス推論エクスペリエンスを開始します。

2. リンクを開くと、以下のインターフェイスが表示されます。[アニメーション] をクリックして、ビデオの結果が生成されるまで待ちます。

  • 画像素材:高解像度の正面向きの写真をアップロードしてください。露出過度や濃い影を避けるために、写真が鮮明で光が均一に分散されていることを確認してください。
  • 参考ビデオ: ポートレートの表情と頭の動きを制御する参考ビデオをアップロードします。ビデオ内のキャラクターは、話したり、歌ったり、さまざまな表情をすることができます。
1

「アニメーションオプション」では、relative motion(相対モーション)、do Crop(トリミング)、Paste-back(背景ペースト)の3つのオプションを有効にするかどうかを選択できます。

新バージョンでは、映像の表現や動き、動きの滑らかさなどをより重視することもできます。

以下にいくつかの例を示します。

3. 縦向きビデオ編集モード

新しいバージョンの下のインターフェースでは、ポートレートビデオ編集モードに入り、ビデオに対応する変更を加えるかどうかを選択することもできます。

4. 精密ポートレート編集モード

インターフェイスの次のセクションは、正確なポートレート編集モードです。ユーザーは、眉毛、口の大きさ、ウィンク、笑顔度などのパラメータを変更して、新しい写真を生成することができます。顔の位置も移動できます。

効果は図の通りです

5. リターゲットビデオモード

デモ インターフェイスの下部には、ビデオ内のキャラクターの口の開口サイズを調整できるリターゲティング ビデオ モードも体験できます。目標の開唇率を 0 に調整すると、新たに生成された動画のキャラクターの口が閉じていることがわかります。

交流とディスカッション

🖌️ 高品質のプロジェクトを見つけたら、メッセージを残してバックグラウンドで推奨してください。さらに、チュートリアル交換グループも設立しました。お友達はコードをスキャンして [SD チュートリアル] に参加し、さまざまな技術的な問題について話し合ったり、アプリケーションの効果を共有したりできます。