MegActor は、オリジナルのビデオコンテンツに基づいて鮮やかな合成ビデオを生成します

チュートリアルの紹介

このチュートリアルは MegActor のデモです。クローンを作成して起動し、API アドレスを開くだけで体験できます。 MegActor は、MEGVII Technology によって開発されたポートレートアニメーションジェネレーターで、オリジナルのビデオを駆動要素として使用して、リアルで鮮やかなトーキングヘッドビデオを生成します。具体的には、研究チームは 2 つのユニットを利用しました。1 つはソース画像からアイデンティティと背景の特徴を抽出するユニット、もう 1 つはオリジナルのビデオから直接抽出された動きの特徴を正確に生成して統合するユニットです。 MegActor は、低品質の公開されているデータセットでトレーニングでき、顔の表情、ポーズの多様性、微妙な制御性、視覚的な品質において優れたパフォーマンスを発揮します。

この技術は、中間表現のないポートレートアニメーション（中間表現フリー）の分野に属し、オリジナルの映像を駆動要素として、リアルで鮮やかなアバター映像を直接生成することができます。 MegActor の主な利点は、従来のアニメーション制作における仲介としての表現を放棄し、代わりに生のビデオデータを直接使用してアニメーションを作成することで、アニメーション制作の効率と品質が大幅に向上することです。

ステップの実行

ステップ 1: リソースの割り当て

在该项目右上角点击「克隆」，随后依次点击 “下一步” 即可完成：基本信息> 选择算力> 审核等步骤。最后点击「继续执行」即可在个人容器内开启本项目。

ステップ 2: プロジェクトの開始

待资源分配完成后，参照下图中的步骤启动项目。

ステップ 3: ビデオの生成

上传图片文件和视频文件进行合成

（合成時間は約3分）

結果のビデオを右クリックしてローカルに保存します。

話し合ってコミュニケーションする

🖌️ 高品質のプロジェクトを見つけたら、メッセージを残してバックグラウンドで推奨してください。さらに、チュートリアル交換グループも設立しました。お友達はコードをスキャンして [SD チュートリアル] に参加し、さまざまな技術的な問題について話し合ったり、アプリケーションの効果を共有したりできます。