Ein-Klick-Bereitstellung von DiffRhythm-full

1. Einführung in das Tutorial

DiffRhythm ist ein End-to-End-Tool zur Musikgenerierung, das auf dem latenten Diffusionsmodell basiert und gemeinsam vom Audio Speech and Language Processing Laboratory der Northwestern Polytechnical University (ASLP@NPU) und der Chinese University of Hong Kong, Shenzhen, entwickelt wurde. Es kann in kurzer Zeit ein komplettes Lied mit einer Länge von bis zu 4 Minuten und 45 Sekunden generieren, einschließlich Gesang und Begleitung. Benutzer müssen lediglich Liedtexte und Stilhinweise angeben, und DiffRhythm kann automatisch Melodien und Begleitungen generieren, die zu den Liedtexten passen und die Eingabe in mehreren Sprachen unterstützen.

DiffRhythm (Chinesisch: 狄韵, Dì Yùn) ist das erste diffusionsbasierte Songgenerierungsmodell, mit dem komplette Songs komponiert werden können. Der Name kombiniert „Diff“ (ein Hinweis auf die diffuse Architektur) und „Rhythm“ (was den Fokus auf Musik und Songwriting betont). Der chinesische Name Dì Yùn (Di Yun) wird ähnlich ausgesprochen wie „DiffRhythm“, wobei „Dì“ (aufmerksames Zuhören) die auditive Wahrnehmung symbolisiert und „Yun“ (melodischer Charme) die Musikalität darstellt.

2. Bedienungsschritte

1. Starten Sie den Container

Klicken Sie nach dem Starten des Containers auf die API-Adresse, um die Weboberfläche aufzurufen. Aufgrund des großen Modells dauert es etwa 3 Minuten, bis die WebUI-Oberfläche angezeigt wird, andernfalls wird "Bad Gateway" angezeigt.

2. Musikgeneration

2.1 Wählen Sie, ob Sie Musik basierend auf Texten oder Audio generieren möchten

2.2 Sie können wählen, ob Sie Musik basierend auf Liedtexten oder Text generieren möchten

3. Diskussion

🖌️ Wenn Sie ein hochwertiges Projekt sehen, hinterlassen Sie bitte im Hintergrund eine Nachricht, um es weiterzuempfehlen! Darüber hinaus haben wir auch eine Tutorien-Austauschgruppe ins Leben gerufen. Willkommen, Freunde, scannen Sie den QR-Code und kommentieren Sie [SD-Tutorial], um der Gruppe beizutreten, verschiedene technische Probleme zu besprechen und Anwendungsergebnisse auszutauschen ↓