HyperAIHyperAI

Command Palette

Search for a command to run...

UniOcc : Unification de la prédiction d'occupation 3D centrée sur la vision avec le rendu géométrique et sémantique

Mingjie Pan Li Liu Jiaming Liu Peixiang Huang Longlong Wang Shaoqing Xu Zhiyi Lai Shanghang Zhang Kuiyuan Yang

Résumé

Dans ce rapport technique, nous présentons notre solution, nommée UniOCC, pour la piste de prédiction d'occupation 3D axée sur la vision dans le défi du nuScenes Open Dataset à CVPR 2023. Les méthodes existantes de prédiction d'occupation se concentrent principalement sur l'optimisation des caractéristiques projetées dans l'espace volumique 3D en utilisant des labels d'occupation 3D. Cependant, le processus de génération de ces labels est complexe et coûteux (en s'appuyant sur des annotations sémantiques 3D), et limité par la résolution des voxels, ils ne peuvent pas fournir des sémantiques spatiales fines. Pour remédier à cette limitation, nous proposons une nouvelle méthode de prédiction d'occupation unifiée (UniOcc), imposant explicitement une contrainte géométrique spatiale et complétant la supervision sémantique fine grâce au rendu par rayon volumique. Notre méthode améliore considérablement les performances du modèle et montre un potentiel prometteur pour réduire les coûts d'annotation humaine. Étant donné la nature fastidieuse de l'annotation de l'occupation 3D, nous introduisons également un cadre professeur-élève sensible à la profondeur (Depth-aware Teacher Student, DTS) pour améliorer la précision de la prédiction en utilisant des données non étiquetées. Notre solution atteint un mIoU de 51,27% sur le classement officiel avec un seul modèle, se classant 3ème dans ce défi.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp