SketchyCOCO: 자유로운 장면 스케치로부터 이미지 생성

장면 수준의 자유스케치로부터 자동 이미지 생성을 위한 첫 번째 방법을 소개합니다. 우리의 모델은 자유스케치를 통해 합성 목표를 지정함으로써 제어 가능한 이미지 생성을 허용합니다. 주요 기여는 자유스케치를 훈련 데이터로 사용하지 않고도 높은 시각적 품질의 객체 수준 이미지 콘텐츠 생성을 지원하는 속성 벡터 연결 생성적 적대 네트워크(Generative Adversarial Network, GAN)인 EdgeGAN입니다. 우리는 이 해결책을 지원하고 평가하기 위해 대규모 복합 데이터셋인 SketchyCOCO를 구축했습니다. SketchyCOCO에서 객체 수준 및 장면 수준 이미지 생성 작업에 대해 우리의 접근 방식을 검증하였습니다. 정량적, 정성적 결과, 인간 평가 및 아블레이션 연구(ablation studies)를 통해 다양한 자유스케치로부터 현실적인 복잡한 장면 수준의 이미지를 생성할 수 있는 본 방법의 능력을 입증하였습니다.