HyperAIHyperAI

Command Palette

Search for a command to run...

3DMatch : Apprentissage de descripteurs géométriques locaux à partir de reconstructions RGB-D

Andy Zeng¹ Shuran Song¹ Matthias Nießner² Matthew Fisher²,⁴ Jianxiong Xiao³ Thomas Funkhouser¹

Résumé

L'appariement de caractéristiques géométriques locales sur des images de profondeur réelles est une tâche difficile en raison du caractère bruyant, de la faible résolution et de l'incomplétude des données d'acquisition 3D. Ces difficultés limitent les performances des méthodes actuelles les plus avancées, qui sont généralement basées sur des histogrammes de propriétés géométriques. Dans cet article, nous présentons 3DMatch, un modèle axé sur les données qui apprend un descripteur de patch volumétrique local pour établir des correspondances entre des données 3D partielles. Pour rassembler des données d'entraînement pour notre modèle, nous proposons une méthode d'apprentissage de caractéristiques auto-supervisée qui exploite les millions d'étiquettes de correspondance présentes dans les reconstructions RGB-D existantes. Les expériences montrent que notre descripteur non seulement parvient à appairer la géométrie locale dans de nouvelles scènes pour la reconstruction, mais qu'il se généralise également à différentes tâches et échelles spatiales (par exemple, l'alignement au niveau des instances de modèles d'objets pour le défi Amazon Picking, et la correspondance de surfaces maillées). Les résultats indiquent que 3DMatch surpasse constamment les autres approches de pointe avec une marge significative. Le code source, les données, les bancs d'essai et les modèles pré-entraînés sont disponibles en ligne à l'adresse http://3dmatch.cs.princeton.edu.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp