HyperAIHyperAI

Command Palette

Search for a command to run...

Pansharpening hyperspectral basé sur un prior d'image profond amélioré et une reconstruction par résidus

Wele Gedara Chaminda Bandara Jeya Maria Jose Valanarasu Vishal M. Patel

Résumé

L’hyper-synthèse par pansharpening vise à combiner une image hyperspectrale à faible résolution (LR-HSI) avec une image pancromatique (PAN) enregistrée afin de produire une image hyperspectrale améliorée à la fois haute résolution spectrale et spatiale. Les méthodes récentes de pansharpening hyperspectrales, basées sur des réseaux de convolution profonds (ConvNets), ont obtenu des résultats remarquables, généralement selon une approche en trois étapes : (1) suréchantillonnage de la LR-HSI, (2) prédiction de l’image résiduelle via un ConvNet, puis (3) obtention de l’image fusionnée finale par addition des sorties des deux premières étapes. Des méthodes récentes ont exploité le Deep Image Prior (DIP) pour effectuer le suréchantillonnage de la LR-HSI, grâce à sa capacité exceptionnelle à préserver à la fois les informations spatiales et spectrales, sans nécessiter d’apprentissage à partir de grands jeux de données. Toutefois, nous avons observé que la qualité des images hyperspectrales suréchantillonnées peut être améliorée en introduisant une contrainte supplémentaire dans le domaine spatial à la fonction d’énergie traditionnellement définie dans le domaine spectral. Nous définissons cette contrainte spatiale comme la distance L1L_1L1 entre l’image PAN prédite et l’image PAN réelle. Pour estimer l’image PAN de l’image hyperspectrale suréchantillonnée, nous proposons également une fonction de réponse spectrale (SRF) apprenable. Par ailleurs, nous avons noté que l’image résiduelle entre l’image hyperspectrale suréchantillonnée et l’image de référence est principalement composée d’informations de contours et de structures très fines. Afin d’estimer précisément ces détails fins, nous proposons un nouveau réseau sur-complet, nommé HyperKite, qui se concentre sur l’apprentissage de caractéristiques de haut niveau en limitant l’expansion du champ réceptif dans les couches profondes. Nous menons des expérimentations sur trois jeux de données d’images hyperspectrales afin de démontrer l’avantage de notre méthode DIP-HyperKite par rapport aux approches de pansharpening de pointe. Les codes d’implémentation, les modèles pré-entraînés ainsi que les résultats de fusion finaux de notre méthode DIP-HyperKite, ainsi que des méthodes utilisées pour les comparaisons, seront rendus accessibles publiquement à l’adresse suivante : https://github.com/wgcban/DIP-HyperKite.git.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp