다중 시점 다중 인물 추적을 위한 통합 프레임워크

3D 다중 시점 다인물 추적(3D MM-Tracking) 분야에서 상당한 발전이 이루어졌음에도 불구하고, 현재의 3D MM-Tracking 프레임워크는 발자국 추적과 자세 추적을 각각 별도로 설계되어 있습니다. 특히, 발자국 추적을 위한 프레임워크는 호모그라피 투영을 통해 지면 상의 3D 위치를 직접 얻기 때문에 지상 위의 3D 자세에는 적용할 수 없습니다. 반면에, 자세 추적을 위한 프레임워크는 일반적으로 다중 시점과 다중 프레임 연관성을 분리하여 처리하므로, 발자국 추적에서는 적은 수의 키포인트만 사용하기 때문에 단일 프레임 내에서 다중 시점 연관성 신호가 약해져 발자국 추적에 견고하지 않을 수 있습니다. 본 연구에서는 이러한 간극을 메우기 위해 통합된 다중 시점 다인물 추적 프레임워크를 제시합니다. 이 프레임워크는 추가적인 수정 없이 단일 시점 2D 바운딩 박스와 2D 자세를 입력으로 받아 여러 사람의 견고한 3D 궤도를 생성할 수 있습니다. 중요한 점은, 다중 프레임과 다중 시점 정보가 공동으로 활용되어 연관성과 삼각 측정의 성능을 개선한다는 것입니다. 본 연구의 프레임워크 효과는 3D 자세 추적 데이터셋인 캠퍼스(Campus)와 선반(Shelf)에서 최신 기술 수준의 성능을 달성함으로써, 그리고 3D 발자국 추적 데이터셋인 WILDTRACK과 MMPTRACK에서 유사한 결과를 얻음으로써 검증되었습니다.