HyperAIHyperAI
il y a 2 mois

UnrealEgo : Un Nouveau Jeu de Données pour la Capture Robuste du Mouvement Humain en 3D Egocentrique

Akada, Hiroyasu ; Wang, Jian ; Shimada, Soshi ; Takahashi, Masaki ; Theobalt, Christian ; Golyanik, Vladislav
UnrealEgo : Un Nouveau Jeu de Données pour la Capture Robuste du Mouvement Humain en 3D Egocentrique
Résumé

Nous présentons UnrealEgo, un nouveau jeu de données à grande échelle et naturel pour l'estimation de la posture humaine 3D égocentrique. UnrealEgo repose sur un concept avancé de lunettes équipées de deux caméras à objectif poisson d'or qui peuvent être utilisées dans des environnements non contraints. Nous concevons leur prototype virtuel et les attachons aux modèles humains 3D pour capturer des vues stéréoscopiques. Nous générons ensuite un corpus important de mouvements humains. Par conséquent, UnrealEgo est le premier jeu de données à fournir des images stéréoscopiques en conditions réelles avec la plus grande variété de mouvements parmi les jeux de données égocentriques existants. De plus, nous proposons une nouvelle méthode de référence basée sur une idée simple mais efficace consistant à élaborer un module d'estimation des points clés 2D pour les entrées stéréoscopiques afin d'améliorer l'estimation de la posture humaine 3D. Les expériences approfondies montrent que notre approche surpass qualitativement et quantitativement les méthodes précédentes de pointe. UnrealEgo et nos codes sources sont disponibles sur notre page web du projet.