HyperAIHyperAI

Command Palette

Search for a command to run...

Synthèse sémantique d'images avec normalisation spatialement adaptative

Taesung Park Ming-Yu Liu Ting-Chun Wang Jun-Yan Zhu

Résumé

Nous proposons la normalisation spatialement adaptative, une couche simple mais efficace pour synthétiser des images photoréalistes à partir d'un modèle sémantique d'entrée. Les méthodes précédentes alimentent directement le modèle sémantique en entrée du réseau profond, qui est ensuite traité par des piles de couches de convolution, de normalisation et de non-linéarité. Nous montrons que cette approche est sous-optimale car les couches de normalisation ont tendance à "laver" l'information sémantique. Pour résoudre ce problème, nous proposons d'utiliser le modèle d'entrée pour moduler les activations dans les couches de normalisation grâce à une transformation spatialement adaptative et apprise. Des expériences sur plusieurs jeux de données difficiles démontrent l'avantage de notre méthode par rapport aux approches existantes, tant en termes de fidélité visuelle que d'alignement avec les modèles d'entrée. Enfin, notre modèle permet un contrôle utilisateur sur la sémantique et le style. Le code source est disponible à l'adresse suivante : https://github.com/NVlabs/SPADE .


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Synthèse sémantique d'images avec normalisation spatialement adaptative | Articles | HyperAI