HyperAIHyperAI

Command Palette

Search for a command to run...

SnowFormer : Transformateur d'interaction contextuelle avec conscience des échelles pour le désneigement d'une seule image

Sixiang Chen; Tian Ye; Yun Liu; Erkang Chen

Résumé

En raison des dégradations de neige variées et complexes, le désneigement d'une seule image est une tâche de restauration d'image particulièrement ardue. Comme les méthodes précédentes ne peuvent pas la traiter idéalement, nous proposons un nouveau transformateur, SnowFormer, qui explore des mécanismes d'attention croisée efficaces pour établir une interaction contextuelle locale-globale entre les patches et surpasser les travaux existants utilisant des opérateurs locaux ou des transformateurs standards. Par rapport aux méthodes de désneigement antérieures et aux méthodes universelles de restauration d'image, SnowFormer présente plusieurs avantages. Premièrement, contrairement à l'attention auto multi-têtes dans les récents Vision Transformers de restauration d'image, SnowFormer intègre le mécanisme d'attention croisée multi-têtes pour effectuer une interaction contextuelle locale-globale entre les requêtes de neige sensibles à l'échelle et les plongements (embeddings) de patchs locaux. Deuxièmement, les requêtes de neige dans SnowFormer sont générées par le générateur de requêtes à partir de caractéristiques sensibles à l'échelle agrégées, riches en indices potentiels propres à l'image propre, ce qui conduit à des résultats de restauration supérieurs. Troisièmement, SnowFormer surpasse les réseaux avancés de désneigement state-of-the-art et les transformateurs universels courants de restauration d'image sur six jeux de données synthétiques et réels. Le code est disponible à l'adresse \url{https://github.com/Ephemeral182/SnowFormer}.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp