Déploiement en un clic de DiffRhythm-full

1. Introduction au tutoriel

DiffRhythm est un outil de génération de musique de bout en bout basé sur le modèle de diffusion latente, développé conjointement par le laboratoire de traitement audio de la parole et du langage de la Northwestern Polytechnical University (ASLP@NPU) et l'Université chinoise de Hong Kong, Shenzhen. Il peut générer une chanson complète d'une durée maximale de 4 minutes et 45 secondes, y compris les voix et l'accompagnement, en peu de temps. Les utilisateurs n'ont qu'à fournir des paroles et des conseils de style, et DiffRhythm peut générer automatiquement des mélodies et des accompagnements qui correspondent aux paroles, prenant en charge la saisie multilingue.

DiffRhythm (chinois : 狄韵, Dì Yùn) est le premier modèle de génération de chansons basé sur la diffusion capable de composer des chansons complètes. Le nom combine « Diff » (une référence à son architecture diffuse) et « Rhythm » (soulignant son accent sur la musique et l'écriture de chansons). Le nom chinois Dì Yùn (Di Yun) est similaire en prononciation à « DiffRhythm », où « Dì » (écouter attentivement) symbolise la perception auditive et « Yun » (charme mélodique) représente la musicalité.

2. Étapes de l'opération

1. Démarrez le conteneur

Après avoir démarré le conteneur, cliquez sur l’adresse API pour accéder à l’interface Web. En raison du grand modèle, il faut environ 3 minutes pour afficher l'interface WebUI, sinon elle affichera « Bad Gateway »

2. Génération musicale

2.1 Choisissez de générer de la musique basée sur les paroles ou l'audio

2.2 Vous pouvez choisir de générer de la musique basée sur des paroles ou du texte

3. Discussion

🖌️ Si vous voyez un projet de haute qualité, veuillez laisser un message en arrière-plan pour le recommander ! De plus, nous avons également créé un groupe d’échange de tutoriels. Bienvenue aux amis pour scanner le code QR et commenter [Tutoriel SD] pour rejoindre le groupe pour discuter de divers problèmes techniques et partager les résultats de l'application↓