PSG는 정교한 주석이 달린 대규모 데이터 세트입니다. 이 데이터 세트에는 48,749개의 Coco 이미지가 포함되어 있으며, Coco의 기존 파노라마 분할 주석을 기반으로 분할된 블록 간의 관계가 주석 처리되어 있습니다. 이 데이터 세트에는 133개의 객체 카테고리가 포함되어 있으며, 그 중 80개가 객체이고 53개가 물건입니다. 저자는 위치 관계(위, 앞 등), 일반적인 객체 관계(매달림 등), 일반적인 생물학적 행동(걷기, 서기 등), 인간 행동(요리 등), 교통 장면에서의 관계(운전, 승마 등), 스포츠 장면에서의 관계(발로 차기 등), 배경 간의 관계(둘러싸기 등)를 포함하여 56가지 유형의 관계를 신중하게 정의합니다.