DynamiCrafter は、静止画像を本物のような動的なビデオに変換します

プロジェクト紹介

従来のダイナミックイメージテクノロジは主に、ランダムまたはドメイン固有の動き (人間の髪や体の動きなど) を使用してビデオのようなアニメーション効果を生成することに重点を置いているため、より一般的なビジュアルコンテンツはこのタイプのテクノロジによって制限されます。

DynamiCrafter は、画像ガイダンステキストを使用してビデオを生成し、入力された完全な画像と初期ノイズを拡散モデルの入力として接続し、最終的に視覚的に優れた、より論理的なビデオアニメーション効果を生成します。

このチュートリアルでは、数行の簡単なコマンドを使用してプロジェクト全体を実行します。これにより、このテクノロジを自分で使用して、プロジェクトの実行効果を体験できるようになります。

このチュートリアルは 2 つの方法で使用できます。
1. 画像とテキストプロンプトを通じてビデオを生成します。
2. 開始フレーム、終了フレーム、プロンプトワードを通じてビデオを生成します。

注: コンテナ内で両方のメソッドを同時に実行することはできません。一方のメソッドを実行した後、端末プロセスを終了し、新しいコマンドを再度入力して、もう一方のメソッドを開始する必要があります。

以下に効果のデモンストレーションと操作手順を示します。

エフェクト表示

ステップの実行

1. テキストプロンプトを通じてビデオを生成する

1. ディレクトリを切り替える

cd DynamiCrafter

2. コマンドの実行後、DynamiCrafter のホームディレクトリに入り、コマンドラインにスクリプト起動コマンドを入力します。

python gradio_app.py

3. このとき、コンテナはスクリプトの内容に従ってプログラムを自動的に実行します。ポート 8080 がインターフェースに表示されるのを待った後、右側の API アドレスをコピーして新しいページで開きます (実名認証は有効です)。必須）

4. Web ページに入ったら、次のプロンプトに従います。

ローカルの写真をアップロードし、[プロンプト] 行に興味のあるプロンプトの単語を入力し、ハイパーパラメータを調整してお気に入りのビデオを生成できます。

2. 開始フレーム、終了フレーム、プロンプトワードを通じてビデオを生成します

このプロジェクトの別のビデオ生成スタイルを体験したい場合は、次のプロセスに従うことができます。

1. まず、URL を返したターミナルページに戻ります。マウスの左ボタンでターミナルページを選択し、キーボードで「ctrl + c」を入力して現在のプロセスを終了し、ターミナルのコマンドラインに次のように入力します。

python gradio_app_interp_and_loop.py

2. タスクが正常に開始されたら、右側の API アドレスをコピーし、新しいページで開きます。

Web ページに入ると、次のコンテンツが表示されます。

開始画像と終了画像をアップロードし、[プロンプト] 行にプロンプトの単語を入力し、パラメーターを選択して調整して、作成する動的な画像またはビデオを生成します。

話し合ってコミュニケーションする

🖌️ 高品質のプロジェクトを見つけたら、メッセージを残してバックグラウンドで推奨してください。さらに、チュートリアル交換グループも設立しました。お友達はコードをスキャンしてメモを作成し、Xingxing WeChat を追加してグループに参加し、さまざまな技術的な問題について話し合ったり、アプリケーションの効果を共有したりできます↓。