Tanz zum Rhythmus der Musik

Das Tanzen im Takt der Musik ist eine instinktive Bewegung des Menschen. Die Modellierung des Musik-zu-Tanz-Generierungsprozesses zu lernen, stellt jedoch eine herausfordernde Aufgabe dar. Dazu sind erhebliche Anstrengungen erforderlich, um die Korrelation zwischen Musik und Tanz genau zu erfassen, da gleichzeitig mehrere Aspekte – wie Stil und Beat sowohl der Musik als auch der Tanzbewegungen – berücksichtigt werden müssen. Zudem ist Tanz inhärent multimodal, und zu jedem Zeitpunkt sind verschiedene folgende Bewegungen einer Pose gleich wahrscheinlich. In diesem Paper stellen wir einen Synthese-durch-Analyse-Lernansatz vor, um aus Musik Tanz zu generieren. Im Analysephase zerlegen wir einen Tanz in eine Reihe grundlegender Tanzbewegungseinheiten, durch die das Modell lernt, wie man sich bewegt. Im Synthese-Phase lernt das Modell, einen Tanz durch die nahtlose Organisation mehrerer grundlegender Tanzbewegungen entsprechend der Eingabemusik zu komponieren. Experimentelle qualitative und quantitative Ergebnisse zeigen, dass die vorgeschlagene Methode in der Lage ist, realistische, vielfältige, stilkonsistente und taktkorrekte Tänze aus Musik zu synthetisieren.