Introduction au tutoriel

该教程至少需要 NVIDIA RTX A6000 48GB 启动。

Allegro est un modèle de génération de vidéos à partir de texte de pointe, développé par Rhymes AI en 2024. Il permet de transformer un texte en contenu vidéo haute définition, avec une résolution de 720p, une fluidité de 15 images par seconde et une durée maximale de 6 secondes. Des articles de recherche associés sont disponibles. Allegro : ouvrez la boîte noire du modèle de génération de vidéos commerciales Ce modèle offre des performances exceptionnelles en synthèse vidéo, tant en termes de qualité que de cohérence temporelle. Il génère rapidement du contenu visuel dynamique à partir de textes descriptifs, offrant ainsi aux créateurs de contenu une approche flexible et maîtrisable de la création vidéo. Lors de tests utilisateurs, le modèle Allegro a surpassé les modèles open source existants et la plupart des modèles commerciaux. De plus, Allegro propose des analyses approfondies et des conseils sur l'amélioration de ses fonctionnalités fondamentales, notamment les extensions du modèle, l'adaptabilité du raffinement des repères et la conception du segmentateur vidéo. Ces améliorations contribuent collectivement à optimiser la capacité du modèle à générer du contenu vidéo complexe à partir des détails narratifs du texte d'entrée.

Ce tutoriel est un tutoriel d'inférence de modèle. Étant donné qu'il faut beaucoup de temps au modèle pour générer une vidéo, ce tutoriel ne peut générer qu'une vidéo de 5 secondes (ce qui prend environ 40 minutes).

Étapes de course

Après avoir cloné et démarré le conteneur, cliquez sur l'adresse API pour accéder à l'interface Web

1. Vidéo générée par texte

• Saisissez l'invite de texte et cliquez sur Soumettre (le chargement du modèle prendra environ 30 secondes, puis une barre de progression s'affichera et la vidéo commencera à être générée. Il faudra environ 40 minutes pour générer une vidéo de cinq secondes. Veuillez patienter.)

Comme le montre la figure ci-dessous

• Lorsque la vidéo est générée, la barre de progression change automatiquement pour lire la vidéo.

Comme le montre la figure ci-dessous

2. Téléchargement de la vidéo

• Cliquez sur le bouton de téléchargement sur le côté droit de la vidéo pour télécharger la vidéo.

Comme le montre la figure ci-dessous

Échange et discussion

🖌️ Si vous voyez un projet de haute qualité, veuillez laisser un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue aux amis pour scanner le code QR et commenter [Tutoriel SD] pour rejoindre le groupe pour discuter de divers problèmes techniques et partager les résultats de l'application↓