HyperAIHyperAI

Command Palette

Search for a command to run...

UniFuse : Fusion unidirectionnelle pour l'estimation de profondeur dans les panoramas 360^{\circ}

Hualie Jiang Zhe Sheng Siyu Zhu Zilong Dong Rui Huang

Résumé

L’apprentissage de la profondeur à partir de panoramas sphériques devient un sujet de recherche populaire, car un panorama offre un champ de vision complet de l’environnement et permet une description relativement complète d’une scène. Toutefois, l’application de réseaux de neurones convolutifs (CNN) bien établis pour les images perspectives au format standard des panoramas sphériques, à savoir la projection équirectangulaire, est sous-optimale, car elle engendre des distorsions importantes aux pôles. Une autre représentation, la projection cubemap, est libre de distorsion, mais présente des discontinuités aux bords et une limitation du champ de vision. Ce papier introduit un nouveau cadre permettant de fusionner les caractéristiques issues des deux projections, en transférant unidirectionnellement les caractéristiques de la projection cubemap vers celles de la projection équirectangulaire uniquement lors de l’étape de décodage. Contrairement aux approches récentes de fusion bidirectionnelle opérant à la fois aux étapes d’encodage et de décodage, notre schéma de fusion est bien plus efficace. En outre, nous avons conçu un module de fusion plus performant adapté à notre approche. Des expériences confirment l’efficacité de notre stratégie de fusion et de son module, et notre modèle atteint des performances de pointe sur quatre jeux de données populaires. Des expériences supplémentaires montrent que notre modèle présente également des avantages en termes de complexité du modèle et de capacité de généralisation. Le code est disponible à l’adresse suivante : https://github.com/alibaba/UniFuse-Unidirectional-Fusion.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
UniFuse : Fusion unidirectionnelle pour l'estimation de profondeur dans les panoramas 360$^{\circ}$ | Articles | HyperAI