SynCamVideo-Dataset 다중 카메라 동기화 비디오 데이터 세트

SynCamVideo-Dataset은 저장대학교, 콰이쇼우테크놀로지, 청화대학교, 홍콩 중국대학교의 연구팀이 2024년에 Unreal Engine 5 렌더링을 사용하여 생성한 멀티 카메라 동기화 비디오 데이터 세트입니다. 관련 논문 결과는 "SynCamMaster: 다양한 관점에서 멀티 카메라 비디오 생성 동기화".

여기에는 36개의 카메라로 각각 촬영한 1,000개의 다양한 장면이 포함되어 있으며, 총 36,000개의 비디오가 생성됩니다. 이 데이터 세트는 50종의 다양한 동물을 "주요 주제"로 하고, Poly Haven의 20개 장소를 배경으로 사용합니다. 각 장면의 카메라는 장면 중심에서 3.5m에서 9m 떨어진 반구형 표면에 배치되었습니다. 렌더링된 비디오와 실제 비디오 간의 필드 오프셋을 최소화하기 위해 카메라의 고도각은 0°~45°로 제한되고 방위각은 0°~360°로 제한됩니다. 모든 장면에서 동일한 카메라 위치 세트를 사용하는 대신, 각 카메라는 이러한 제약 조건 내에서 무작위로 샘플링합니다.

SynCamVideo 데이터 세트는 멀티 카메라 동기화 비디오 생성을 위한 모델을 훈련하는 데 사용할 수 있으며, 이는 영화 제작 및 멀티 뷰 데이터 생성과 같은 분야에 응용할 수 있는 영감을 제공합니다. 데이터 세트의 파일 구조에는 훈련 및 검증 세트가 포함되어 있으며, 각 장면의 비디오와 해당 카메라 외부 매개변수는 별도로 저장됩니다.