HyperAIHyperAI

Command Palette

Search for a command to run...

Traduction d'images photoréalistes à haute résolution en temps réel : Un réseau de traduction pyramidal laplacien

Jie Liang extsuperscript1,2,* Hui Zeng extsuperscript1,2,* Lei Zhang extsuperscript1,2†

Résumé

Les méthodes actuelles de traduction d'image à image (I2IT) sont soit limitées aux images de faible résolution, soit caractérisées par un temps d'inférence long en raison de leur lourde charge de calcul sur la convolution des cartes de caractéristiques de haute résolution. Dans cet article, nous nous concentrons sur l'accélération des tâches de traduction d'image à image photoréaliste de haute résolution basée sur la décomposition et la reconstruction en pyramide laplacienne sous forme fermée. Plus précisément, nous montrons que les transformations d'attributs, telles que la manipulation de l'éclairage et des couleurs, sont plus liées au composant à basse fréquence, tandis que les détails du contenu peuvent être affinés de manière adaptative sur les composants à haute fréquence. Nous proposons donc un réseau de traduction en pyramide laplacienne (LPTN) pour effectuer simultanément ces deux tâches, où nous concevons un réseau léger pour traduire le composant à basse fréquence avec une résolution réduite et une stratégie de masquage progressif pour affiner efficacement les composants à haute fréquence. Notre modèle évite la plupart des calculs lourds nécessaires pour traiter les cartes de caractéristiques de haute résolution tout en préservant fidèlement les détails de l'image. De nombreux résultats expérimentaux sur diverses tâches montrent que la méthode proposée peut traduire des images 4K en temps réel avec une seule carte graphique standard tout en offrant des performances comparables aux méthodes existantes. Les jeux de données et les codes sont disponibles : https://github.com/csjliang/LPTN.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp