HyperAIHyperAI

Command Palette

Search for a command to run...

Réseau Auto-Rectify pour l'estimation non supervisée de la profondeur en intérieur

Jia-Wang Bian Huangying Zhan Naiyan Wang Tat-Jun Chin Chunhua Shen Ian Reid

Résumé

L’estimation de profondeur à partir d’une seule vue à l’aide de réseaux de neurones convolutifs (CNN) entraînés à partir de vidéos non étiquetées a montré un potentiel prometteur. Toutefois, des résultats excellents ont principalement été obtenus dans des scénarios de conduite en milieu urbain, et ces méthodes échouent fréquemment dans d’autres contextes, en particulier dans des vidéos prises en intérieur avec des appareils tenus à la main. Dans ce travail, nous démontrons que les mouvements propres complexes observés dans les environnements tenus à la main constituent un obstacle critique pour l’apprentissage de la profondeur. Notre analyse fondamentale indique que la rotation agit comme du bruit durant l’entraînement, contrairement à la translation (base), qui fournit des signaux de supervision. Pour surmonter ce défi, nous proposons une méthode de prétraitement des données qui rectifie les images d’entraînement en éliminant leurs rotations relatives, afin d’assurer un apprentissage plus efficace. La performance nettement améliorée confirme la validité de notre approche. Dans une optique d’apprentissage end-to-end sans nécessiter de prétraitement, nous introduisons un Auto-Rectify Network doté de fonctions de perte novatrices, capable d’apprendre automatiquement à rectifier les images durant l’entraînement. En conséquence, nos résultats surpassent de manière significative la méthode état de l’art non supervisée précédente sur le jeu de données exigeant NYUv2. Nous démontrons également la capacité de généralisation de notre modèle entraîné sur les jeux de données ScanNet et Make3D, ainsi que l’universalité de notre méthode d’apprentissage sur les jeux de données 7-Scenes et KITTI.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp