2달 전
Lodge++: 생동감 있는 안무 패턴으로 고품질의 긴 댄스 생성
Li, Ronghui ; Zhang, Hongwen ; Zhang, Yachao ; Zhang, Yuxiang ; Zhang, Youliang ; Guo, Jie ; Zhang, Yan ; Li, Xiu ; Liu, Yebin

초록
우리는 음악과 원하는 장르를 주어졌을 때 고품질, 초장시간, 그리고 생동감 넘치는 춤을 생성하기 위한 코레오그래피 프레임워크인 Lodge++를 제안합니다. 계산 효율성의 문제, 복잡하고 생동감 넘치는 전역 코레오그래피 패턴 학습, 그리고 국부적인 춤 동작의 물리적 품질을 처리하기 위해 Lodge++는 전체에서 세부로 이어지는 두 단계 전략을 채택하여 춤을 생성합니다. 첫 번째 단계에서는 복잡한 전역 코레오그래피 패턴을 포착하는 대략적인 춤 원시형(Primitive)을 생성하기 위한 전역 코레오그래피 네트워크가 설계되었습니다. 두 번째 단계에서는 이러한 춤 원시형에 안내되어 복잡한 코레오그래피 패턴에 충실하게 고품질, 장시간 시퀀스의 춤을 병렬로 생성하기 위한 원시형 기반 춤 확산 모델이 제안되었습니다. 또한 물리적 타당성을 개선하기 위해 Lodge++는 캐릭터 자기침투를 해결하는 침투 안내 모듈, 발-지면 접촉을 최적화하는 발 정제 모듈, 그리고 장르 일관성을 유지하기 위한 다중 장르 식별기를 사용합니다. Lodge++는 광범위한 실험을 통해 검증되었으며, 실험 결과 우리의 방법이 다양한 장르의 춤에 적합한 초장시간의 고품질 춤을 신속하게 생성할 수 있으며, 잘 구성된 전역 코레오그래피 패턴과 고품질 국부 동작을 보장함을 보여주었습니다.