스파스 모바일 카메라를 활용한 경량 다인용 전동작 캡처

다수 인물의 전체 운동 캡처는 심각한 가림현상, 신체에서 얼굴과 손까지 다양한 재구성 세밀도, 급격히 변화하는 관측 스케일, 그리고 빠른 신체 운동 등으로 인해 매우 도전적인 과제이다. 이러한 과제를 극복하기 위해, 우리는 단일 스파스 다중 시점 카메라만을 사용하는 경량화된 다수 인물 상호작용 시나리오를 위한 전체 운동 캡처 시스템을 제안한다. 새로운 손과 얼굴 부트스트랩 알고리즘을 도입함으로써, 심각한 가림 상황에서도 손과 얼굴의 효율적인 위치 추정과 정확한 연결이 가능하다. 본 연구는 자세 회귀와 키포인트 탐지 기법을 병행 활용하고, 픽셀 정렬 정확도를 달성하기 위한 통합적인 이단계 파라메트릭 피팅 방법을 제안한다. 또한 극단적인 자기 가림 자세 및 밀접한 상호작용 상황에서는, 다음 프레임으로 픽셀 정렬 재구성을 전파할 수 있는 새로운 피드백 메커니즘을 제안하여 보다 정확한 연결을 실현한다. 종합적으로, 본 연구는 최초로 경량화된 전체 캡처 시스템을 제안하며, 빠르고 안정적이며 정확한 다수 인물 전체 운동 캡처 성능을 달성하였다. 실험 결과와 분석을 통해, 기존의 방법들에 비해 스파스 시점 환경에서도 더 높은 정확도를 확보함을 입증하였다.