HyperAIHyperAI

Command Palette

Search for a command to run...

Attention Fenêtrée Partitionnée par Canal et Apprentissage Fréquentiel pour la Résolution Unique d’Image

Dinh Phu Tran Dao Duy Hung Daeyoung Kim

Résumé

Récemment, les méthodes d’attention basées sur fenêtres ont montré un grand potentiel pour les tâches de vision par ordinateur, en particulier dans le cadre de la super-résolution d’image unique (SISR). Toutefois, elles peinent parfois à capturer les dépendances à longue portée et les relations entre des tokens éloignés. En outre, nous constatons que l’apprentissage dans le domaine spatial ne transmet pas le contenu fréquentiel de l’image, un aspect crucial dans le SISR. Pour surmonter ces limitations, nous proposons un nouveau modèle, le Channel-Partitioned Attention Transformer (CPAT), conçu pour mieux capturer les dépendances à longue portée grâce à une expansion séquentielle des fenêtres le long des dimensions hauteur et largeur des cartes de caractéristiques. Par ailleurs, nous introduisons un nouveau module, le Spatial-Frequency Interaction Module (SFIM), qui intègre des informations provenant à la fois des domaines spatial et fréquentiel afin d’offrir une représentation plus complète des cartes de caractéristiques. Ce module permet notamment de mieux capter le contenu fréquentiel et d’étendre le champ réceptif à l’ensemble de l’image. Les résultats expérimentaux démontrent l’efficacité de nos modules et de l’architecture proposée. En particulier, le CPAT dépasse les méthodes de l’état de l’art actuel de jusqu’à 0,31 dB sur la tâche de super-résolution x2 sur le jeu de données Urban100.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp