HyperAIHyperAI

Command Palette

Search for a command to run...

ReCoNet : Réseau de transfert de style vidéo en temps réel

Chang Gao∗1, Derun Gu∗1, Fangjun Zhang∗1, and Yizhou Yu1,2

Résumé

Les modèles de transfert de style d'images basés sur les réseaux neuronaux convolutifs souffrent généralement d'une forte incohérence temporelle lorsqu'ils sont appliqués aux vidéos. Bien que certains modèles de transfert de style vidéo aient été proposés pour améliorer la cohérence temporelle, ils échouent à garantir simultanément une vitesse de traitement rapide, une qualité stylistique perceptive satisfaisante et une haute cohérence temporelle. Dans cet article, nous présentons un nouveau modèle de transfert de style vidéo en temps réel, ReCoNet, capable de générer des vidéos avec un transfert de style temporalement cohérent tout en maintenant des styles perceptuels favorables. Une nouvelle contrainte de déformation luminance est ajoutée au coût temporel au niveau de sortie pour capturer les changements de luminance entre les images consécutives et augmenter la stabilité du stylisation sous l'effet d'éclairage. Nous proposons également une nouvelle perte temporelle au niveau des cartes de caractéristiques pour renforcer davantage la cohérence temporelle sur les objets identifiables. Les résultats expérimentaux montrent que notre modèle présente des performances exceptionnelles tant qualitativement que quantitativement.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp