Démonstration De Génération Vidéo Allegro

Introduction au tutoriel

该教程至少需要 NVIDIA RTX A6000 48GB 启动。

Allegro est un modèle de génération de texte en vidéo de pointe développé par Rhymes AI en 2024 qui a la capacité de convertir une entrée de texte de base en contenu vidéo haute définition, avec une résolution de 720p, une fluidité de 15 images par seconde et une durée vidéo maximale de 6 secondes. Les résultats pertinents de l'article sontAllegro : ouvrez la boîte noire du modèle de génération de vidéos commercialesLe modèle affiche d'excellentes performances en synthèse vidéo, tant en termes de qualité que de cohérence temporelle. Il permet de générer rapidement du contenu visuel dynamique à partir de textes descriptifs, offrant ainsi aux créateurs de contenu une méthode flexible et contrôlable pour créer des vidéos. Lors d'études utilisateurs, le modèle Allegro a affiché des performances supérieures à celles des modèles open source existants et de la plupart des modèles commerciaux. De plus, Allegro fournit des informations et des conseils pour améliorer les fonctionnalités fondamentales, notamment l'extension du modèle, l'adaptabilité du raffinement rapide et la conception de tokeniseurs vidéo. Ensemble, ces améliorations améliorent la capacité du modèle à générer du contenu vidéo complexe à partir de détails narratifs issus du texte d'entrée.

Ce tutoriel est un tutoriel d'inférence de modèle. Étant donné qu'il faut beaucoup de temps au modèle pour générer une vidéo, ce tutoriel ne peut générer qu'une vidéo de 5 secondes (ce qui prend environ 40 minutes).

Étapes de course

Après avoir cloné et démarré le conteneur, cliquez sur l'adresse API pour accéder à l'interface Web

1. Vidéo générée par texte

• Saisissez l'invite de texte et cliquez sur Soumettre (le chargement du modèle prendra environ 30 secondes, puis une barre de progression s'affichera et la vidéo commencera à être générée. Il faudra environ 40 minutes pour générer une vidéo de cinq secondes. Veuillez patienter.)

Comme le montre la figure ci-dessous

• Lorsque la vidéo est générée, la barre de progression change automatiquement pour lire la vidéo.

Comme le montre la figure ci-dessous

2. Téléchargement de la vidéo

• Cliquez sur le bouton de téléchargement sur le côté droit de la vidéo pour télécharger la vidéo.

Comme le montre la figure ci-dessous

Échange et discussion

🖌️ Si vous voyez un projet de haute qualité, veuillez laisser un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue aux amis pour scanner le code QR et commenter [Tutoriel SD] pour rejoindre le groupe pour discuter de divers problèmes techniques et partager les résultats de l'application↓