HyperAIHyperAI

Command Palette

Search for a command to run...

Répositionnement du sujet au sein de l’image

Yikai Wang Chenjie Cao Ke Fan Qiaole Dong Yifan Li Xiangyang Xue Yanwei Fu

Résumé

La manipulation d’images actuelle se concentre principalement sur des opérations statiques, telles que le remplacement de régions spécifiques au sein d’une image ou la modification de son style global. Dans ce papier, nous introduisons une tâche innovante de manipulation dynamique, appelée répositionnement de sujet. Cette tâche consiste à déplacer un sujet spécifié par l’utilisateur vers une position souhaitée tout en préservant la fidélité de l’image. Nos recherches révèlent que les sous-tâches fondamentales du répositionnement de sujet — à savoir combler le vide laissé par le sujet déplacé, reconstruire les parties du sujet obscures et fusionner le sujet de manière cohérente avec les zones environnantes — peuvent être efficacement reformulées comme une tâche unifiée de remplissage guidé par une requête (inpainting guidé par prompt). Par conséquent, nous pouvons utiliser un seul modèle génératif à diffusion pour traiter ces sous-tâches en s’appuyant sur diverses requêtes spécifiques, apprises grâce à notre technique proposée d’inversion de tâche. En outre, nous intégrons des techniques de prétraitement et de post-traitement afin d’améliorer davantage la qualité du répositionnement de sujet. Ces composants forment ensemble notre cadre SEELE (SEgment-gEnerate-and-bLEnd). Pour évaluer l’efficacité de SEELE dans le répositionnement de sujet, nous avons constitué un jeu de données réel, appelé ReS. Les résultats obtenus par SEELE sur ReS démontrent sa performance remarquable. Le code source et le jeu de données ReS sont disponibles à l’adresse suivante : https://yikai-wang.github.io/seele/.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Répositionnement du sujet au sein de l’image | Articles | HyperAI