2달 전
MIGS: 장면 그래프에서 메타 이미지 생성
Farshad, Azade ; Musatian, Sabrina ; Dhamo, Helisa ; Navab, Nassir

초록
장면 그래프로부터 이미지를 생성하는 것은 명시적인 장면 생성 및 조작을 위한 유망한 방향입니다. 그러나 장면 그래프에서 생성된 이미지는 데이터의 높은 난이도와 다양성 때문에 품질이 부족합니다. 우리는 MIGS (Meta Image Generation from Scene Graphs)를 제안합니다. 이는 그래프로부터 소수 샘플 이미지를 생성하기 위한 메타 학습 기반 접근 방식으로, 모델을 다양한 장면에 적응시키고 다양한 작업 세트를 통해 훈련하여 이미지 품질을 향상시키는 역할을 합니다. 작업 주도 방식으로 데이터를 샘플링함으로써, 우리는 장면 속성에 따라 분류된 다양한 작업 세트를 사용하여 생성기를 메타 학습으로 훈련시킵니다. 우리의 결과는 이 메타 학습 접근 방식을 사용하여 장면 그래프로부터 이미지를 생성하면 이미지 품질과 장면 내 의미론적 관계를 포착하는 측면에서 최신 성능을 달성한다는 것을 보여줍니다. 프로젝트 웹사이트: https://migs2021.github.io/