DynPose-100K는 NVIDIA가 2025년에 발표한, 10만 개의 다양한 동적 비디오와 정밀한 카메라 주석을 포함하는 대규모 데이터셋입니다. 관련 논문은 「Dynamic Camera Poses and Where to Find Them」이며, 동적 비디오에서 카메라 내부 파라미터와 포즈의 정확한 추정이라는 과제를 해결하는 것을 목표로 합니다. 카메라 추정에 적합한 비디오를 선별하고 동적 비디오 카메라 추정 알고리즘을 개선하여 컴퓨터 비전 연구에 고품질 데이터 지원을 제공합니다.

이 데이터셋은 320만 개의 후보 비디오에서 엄선되었으며, 동적 콘텐츠가 풍부한 비디오 클립을 포함하고 있습니다. 모든 비디오에는 세계-카메라 카메라 포즈(poses)와 카메라 내부 파라미터(intrinsics)가 주석으로 표시되어 있습니다.

데이터셋 구성

데이터셋은 주로 다음 부분과 필드로 구성됩니다:

• 비디오 데이터: 약 10만 개의 MP4 형식 비디오, 해상도 1280×720 (720p), 총 크기 약 200 GB.
• 프레임 데이터: 비디오에서 추출한 JPG 형식 프레임, 프레임 속도 12 fps, 총 크기 약 400 GB.
• 카메라 주석 데이터: PKL 형식 파일, 다음 필드 포함:
• poses: 카메라 포즈 행렬 (N',3,4)
• intrinsics: 카메라 내부 파라미터 행렬 (3,3)
• frame_idxs: 해당 프레임 인덱스 목록
• mean_reproj_error: 평균 재투영 오차
• num_points: 재투영 점의 수
• num_frames: 비디오 총 프레임 수
• 메타데이터 파일:
• metadata.csv: 비디오 ID, URL, 타임스탬프, 설명 등 정보 포함, 비디오 다운로드 및 프레임 추출에 사용.
• uid_mapping.csv: UID 매핑 파일.
• Lightspeed 벤치마크 테스트 세트: 실제 카메라 포즈가 포함된 짧은 비디오 클립으로 구성, DynPose-100K의 주석 방법 검증에 사용, 총 크기 약 8.1 GB.

Citation

@inproceedings{rockwell2025dynpose,
    author = {Rockwell, Chris and Tung, Joseph and Lin, Tsung-Yi and Liu, Ming-Yu and Fouhey, David F. and Lin, Chen-Hsuan},
    title = {Dynamic Camera Poses and Where to Find Them},
    booktitle = {CVPR},
    year = 2025
}