HyperAIHyperAI

Command Palette

Search for a command to run...

il y a 4 mois

Aggrégation de caractéristiques sensible à l’espace pour la géolocalisation croisée basée sur l’image

{Liu Liu Yujiao Shi Xin Yu Hongdong Li}

Aggrégation de caractéristiques sensible à l’espace pour la géolocalisation croisée basée sur l’image

Résumé

Dans cet article, nous développons un nouveau réseau profond afin de traiter explicitement les différences intrinsèques entre les vues au sol et aériennes. Nous observons qu’il existe des correspondances approximatives entre les images au sol et aériennes. Plus précisément, les pixels situés dans la même direction azimutale dans une image aérienne correspondent approximativement à une colonne verticale dans l’image vue au sol. Ainsi, nous proposons une approche en deux étapes exploitant cette connaissance a priori. La première étape consiste à appliquer une transformation polaire régulière afin de déformer une image aérienne de manière à rapprocher son domaine de celui d’un panorama vu au sol. Notons que la transformation polaire, étant une transformation géométrique pure, est indépendante du contenu scénique et ne peut donc pas assurer un alignement parfait entre les deux domaines. Ensuite, nous introduisons un mécanisme d’attention spatiale qui rapproche davantage, dans l’espace d’embedding, les caractéristiques profondes correspondantes. Pour améliorer la robustesse de la représentation des caractéristiques, nous proposons une stratégie d’agrégation des caractéristiques fondée sur l’apprentissage de plusieurs embeddings spatiaux. Grâce à cette approche en deux étapes, nous obtenons des représentations profondes plus discriminantes, ce qui permet une géolocalisation croisée plus précise. Nos expériences sur des jeux de données standard montrent une amélioration significative des performances, avec un taux de rappel plus que doublé par rapport à l’état de l’art précédent.

Benchmarks

BenchmarkMéthodologieMétriques
image-based-localization-on-vigor-cross-areaSAFA
Hit Rate: 8.85
Recall@1: 8.20
Recall@1%: 77.61
Recall@10: 26.36
Recall@5: 19.59
image-based-localization-on-vigor-same-areaSAFA
Hit Rate: 36.87
Recall@1: 33.93
Recall@1%: 98.24
Recall@10: 68.12
Recall@5: 58.42

Construire l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec du co-codage IA gratuit, un environnement prêt à l'emploi et les meilleurs prix GPU.

Co-codage IA
GPU prêts à utiliser
Meilleurs prix
Commencer

Hyper Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Aggrégation de caractéristiques sensible à l’espace pour la géolocalisation croisée basée sur l’image | Articles de recherche | HyperAI