オンラインチュートリアル | 青島の兄弟、ジャオ・エンジュンの魂は黒い神話上の悟空に浸透しますか？ MuseV + MuseTalk で高品質なデジタル人材を創出
従来のデジタル ヒューマン トレーニング ソリューションを使用して高品質のデジタル ヒューマンを生成するには、多くの場合、多くの時間とコンピューティング リソースが必要であり、優れた唇形状の一貫性効果を実現したい場合は、トレーニング資料にも高い要件が必要になります。あるいはそれ以上。
MuseV と MuseTalk の登場は、デジタル ヒューマンの分野に新たな進歩をもたらしました。MuseV を使用してデジタル ヒューマン ビデオを生成し、その後 MuseTalk を使用して唇の形状と音声を同期させると、わずか数分で完全なデジタル ヒューマンの制作が完了します。
「MuseV 無制限のバーチャル ヒューマン ビデオ生成デモ」と「MuseTalk 高品質リップシンク モデル デモ」は、どちらも OpenBayes の公開チュートリアル モジュールで開始されました。コマンドを入力する必要がなく、ワンクリックですぐにクローン作成を開始できます。
チュートリアルのアドレス:
*ミューズV:
※ミューズトーク：
皆様に理解を深めていただくために、Bステーションアップ「nowsmon」のマスターが詳細な指導ビデオを録画しました。ワンクリックで接続していただけます。
https://www.bilibili.com/video/BV1fCWVeWEic/?vd_source=5e54209e1f8c68b7f1dc3df8aabf856c
多くの読者は、最近人気の「黒神話ウーコン」が本当に人々に愛され、嫌われていることをすでに経験していると思いますが、多くのプレイヤーは彼の顔が十分にハンサムではないと不満を抱き、彼を「ナショナル・ヤン・ジャン」ジャオ・エンジュンに置き換えました。
デモの実行
MuseV を使用してバーチャル ヒューマン ビデオを生成する
1. hyper.ai にログインし、「チュートリアル」ページで「MuseV Unlimited Virtual Human Video Generation Demo」を検索し、「このチュートリアルをオンラインで実行する」をクリックします。
2. ページがジャンプしたら、右上隅の「クローン」をクリックしてチュートリアルを独自のコンテナにクローンします。
3. 右下隅の「次へ: コンピューティング能力の選択」をクリックします。
4. ページがジャンプしたら、「NVIDIA RTX 4090」と「PyTorch」のイメージを選択し、「次へ: レビュー」をクリックします。以下の招待リンクを使用してサインアップした新規ユーザーは、4 時間の RTX 4090 + 5 時間の CPU を無料で入手できます。
HyperAI ハイパーニューラルの専用招待リンク (ブラウザに直接コピーして開きます):https://openbayes.com/console/signup?r=6bJ0ljLFsFh_Vvej
5. すべてが正しいことを確認したら、[続行] をクリックし、最初のクローンが割り当てられるまで待ちます。ステータスが「実行中」に変わったら、「API アドレス」の横にあるジャンプ矢印をクリックしてデモ ページにジャンプします。APIアドレスアクセス機能を利用するには実名認証が必要となりますのでご注意ください。
API アドレスを開いたときに「BadGateway」が表示された場合は、モデルがロードされていないことを意味します。API アドレスを開く前に 1 ～ 2 分待ってください。
6. デモを開いたら、写真をアップロードしてプロンプトに入ります。プロンプトの形式は、品質の単語 + キャラクターの件名 + アクションの単語です。たとえば、(傑作、最高品質、高解像度:1)、(1 ボーイ、ソロ:1)、(目のまばたき):1.6)、(髪のウェーブ:1.3)、入力後「生成」をクリックし、しばらく待つとビデオが生成されます。
MuseTalkを使用したリップシンクとオーディオシンク
1.「チュートリアル」インターフェースに戻り、「MuseTalk 高品質リップシンクモデルデモ」を開き、「このチュートリアルをオンラインで実行する」をクリックします。
2. ページがジャンプしたら、右上隅の「クローン」をクリックしてチュートリアルを独自のコンテナにクローンします。
3. 右下隅の「次へ: コンピューティング能力の選択」をクリックします。
4. ページがジャンプした後も、「NVIDIA RTX 4090」と「PyTorch」イメージを選択し、「次へ: レビュー」をクリックします。
5. すべてが正しいことを確認したら、「続行」をクリックし、最初のクローンが「実行中」と表示されたら、「API アドレス」の横にあるジャンプ矢印をクリックして開きます。リソースの割り当てには約 2 分かかります。デモ。
6. MuseTalk デモ ページに入り、作成したビデオをアップロードし、[生成] をクリックしてしばらく待ちます。新しく生成されたビデオのキャラクターの唇の形状が一致していることがわかります。オーディオ。
私たちは「安定拡散チュートリアル交換グループ」を設立し、さまざまな技術的問題について話し合ったり、アプリケーションの効果を共有したりするためにグループに参加する友人を歓迎します~