2ヶ月前

Lodge++: 鮮やかな振付パターンによる高品質で長時間のダンス生成

Li, Ronghui ; Zhang, Hongwen ; Zhang, Yachao ; Zhang, Yuxiang ; Zhang, Youliang ; Guo, Jie ; Zhang, Yan ; Li, Xiu ; Liu, Yebin
Lodge++: 鮮やかな振付パターンによる高品質で長時間のダンス生成
要約

我々はLodge++を提案します。これは音楽と希望するジャンルが与えられた場合に、高品質で超長尺かつ鮮やかなダンスを生成するための振付フレームワークです。計算効率の向上、複雑で鮮やかな全体的な振付パターンの学習、および局所的なダンス動作の物理的品質という課題に対処するために、Lodge++は粗い段階から細かい段階へと進む二段階戦略を採用しています。第一段階では、全体的な振付ネットワークが設計され、複雑な全体的な振付パターンを捉える粗粒度のダンスプリミティブを生成します。第二段階では、これらのダンスプリミティブに基づいて、さらに高品質で長尺のダンスを並列に生成するプリミティブベースのダンス拡散モデルが提案されます。このモデルは複雑な振付パターンに忠実に従います。また、物理的妥当性を向上させるために、Lodge++はキャラクター自体の貫通問題を解決する浸透ガイドモジュール、足-地面接触を最適化する足洗練モジュール、そしてダンス全体でのジャンルの一貫性を維持する多ジャンル識別子を使用しています。Lodge++は広範な実験により検証されており、本手法が様々なダンスジャンルに適した超長尺のダンスを迅速に生成できること、そして整然とした全体的な振付パターンと高品質な局所動作を確保できることを示しています。

Lodge++: 鮮やかな振付パターンによる高品質で長時間のダンス生成 | 最新論文 | HyperAI超神経