Führen Sie Die Open-Sora-Plan-Demo Online Aus

Modelleinführung

Open-Sora-Plan ist ein Open-Source-Projekt, das darauf abzielt, Sora (T2V-Modell) von OpenAI zu reproduzieren und Wissen über Video-VQVAE (VideoGPT) + DiT aufzubauen. Das Projekt wurde gemeinsam von der Peking-Universität und Tuzhan Intelligent Technology Co., Ltd. initiiert und die Forschung hat die Qualität der Videogenerierung und die Fähigkeit zur Textsteuerung erheblich verbessert. Das Modell kann 10 Sekunden lange HD-Videos mit 24 Bildern pro Sekunde und einer Auflösung von 1024 x 1024 erstellen und unterstützt außerdem die Erstellung hochauflösender Bilder, wodurch den Benutzern ein reichhaltigeres und detaillierteres visuelles Erlebnis geboten wird.

Wie man läuft

1. Öffnen Sie eine neue Terminalseite

2. Geben Sie den folgenden Befehl ein, um die abhängige Umgebung zu installieren

cd Open-Sora-Plan
pip install diffusers==0.27.2 gradio==4.0.0 einops omegaconf==2.1.1 pytorch_lightning==2.2.1 sentencepiece transformers==4.39.1 accelerate==0.28.0

3. Geben Sie den folgenden Befehl ein, um die Gradio-Demo auszuführen

python -m opensora.serve.gradio_web_server

4. Öffnen Sie rechts die „API-Adresse“. Wenn Sie keine Echtnamenauthentifizierung haben, müssen Sie diese zuerst durchführen.