HyperAIHyperAI

Command Palette

Search for a command to run...

LATR : Détection de voies en 3D à partir d'images monoculaires avec un Transformers

J Moon

Résumé

La détection de voies en 3D à partir d'images monoculaires est une tâche fondamentale mais complexe dans le domaine de la conduite autonome. Les récentes avancées reposent principalement sur des substituts structuraux en 3D (par exemple, vue d'oiseau) construits à partir de caractéristiques d'images frontales et de paramètres de caméra. Cependant, l'ambiguïté de profondeur inhérente aux images monoculaires entraîne inévitablement un décalage entre la carte de caractéristiques substitutive construite et l'image originale, posant un défi majeur pour une détection précise des voies. Pour résoudre ce problème, nous présentons un nouveau modèle LATR, un détecteur de voies en 3D intégral qui utilise des caractéristiques frontales sensibles à la 3D sans représentation de vue transformée. Plus précisément, LATR détecte les voies en 3D par le biais d'une attention croisée basée sur des paires requête et clé-valeur, construites à l'aide de notre générateur de requêtes sensible aux voies et d'un plongement positionnel dynamique en 3D du sol. D'une part, chaque requête est générée à partir de caractéristiques sensibles aux voies en 2D et adopte un plongement hybride pour améliorer les informations sur les voies. D'autre part, les informations spatiales en 3D sont injectées sous forme de plongement positionnel provenant d'un plancher terrestre mis à jour itérativement. LATR surpass largement les méthodes précédentes de pointe sur les jeux de données synthétiques Apollo, réalistes OpenLane et ONCE-3DLanes (par exemple, une amélioration de 11,4 points en termes de score F1 sur OpenLane). Le code sera rendu disponible sur https://github.com/JMoonr/LATR .


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp