Synthèse d'images semi-paramétrique

Nous présentons une approche semi-paramétrique pour la synthèse d'images photographiques à partir de dispositions sémantiques. Cette méthode combine les forces complémentaires des techniques paramétriques et non paramétriques. La composante non paramétrique est une banque de mémoire contenant des segments d'images construits à partir d'un ensemble d'entraînement d'images. À l'épreuve, étant donné une nouvelle disposition sémantique, la banque de mémoire est utilisée pour récupérer des références photographiques qui servent de matériel source à un réseau profond. La synthèse est réalisée par un réseau profond qui utilise le matériel photographique fourni. Des expériences menées sur plusieurs ensembles de données de segmentation sémantique montrent que l'approche présentée produit des images considérablement plus réalistes que les techniques purement paramétriques récentes. Les résultats sont présentés dans la vidéo supplémentaire disponible à l'adresse suivante : https://youtu.be/U4Q98lenGLQ