HyperAIHyperAI

Command Palette

Search for a command to run...

360SD-Net : Estimation stéréoscopique de profondeur à 360° avec un volume de coût apprenable

Albert Liu Chunyuan Li Yonghong Zhang

Résumé

Récemment, les réseaux neuronaux profonds entraînables de bout en bout ont considérablement amélioré l'estimation de la profondeur stéréoscopique pour les images en perspective. Cependant, les images 360° capturées avec une projection équirectangulaire ne peuvent pas bénéficier directement des méthodes existantes en raison des distorsions introduites (c'est-à-dire, les lignes en 3D ne sont pas projetées en lignes en 2D). Pour résoudre ce problème, nous présentons une nouvelle architecture spécifiquement conçue pour la disparité sphérique en utilisant le dispositif de paires de caméras 360° haut-bas. De plus, nous proposons d'atténuer le problème de distorsion par (1) une branche d'entrée supplémentaire capturant la position et la relation de chaque pixel dans le système de coordonnées sphériques, et (2) un volume de coût construit à partir d'un filtre décalable appris. En raison du manque de données stéréoscopiques 360°, nous avons collecté deux jeux de données stéréoscopiques 360° provenant de Matterport3D et Stanford3D pour l'entraînement et l'évaluation. Des expériences étendues et une étude d'ablation sont fournies pour valider notre méthode par rapport aux algorithmes existants. Enfin, nous montrons des résultats prometteurs dans des environnements réels capturés avec deux caméras grand public.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp