Objectron : Un grand jeu de données de vidéos centrées sur les objets dans le monde réel avec des annotations de pose

La détection d'objets 3D est récemment devenue populaire en raison de ses nombreuses applications dans le domaine de la robotique, de la réalité augmentée, de l'autonomie et de la récupération d'images. Nous présentons le jeu de données Objectron afin d'avancer l'état de l'art en détection d'objets 3D et de stimuler de nouvelles recherches et applications, telles que le suivi d'objets 3D, la synthèse de vues et une représentation améliorée des formes 3D. Ce jeu de données comprend des courtes séquences vidéo centrées sur les objets, avec des annotations de pose pour neuf catégories, et contient 4 millions d'images annotées réparties sur 14 819 vidéos annotées. Nous proposons également une nouvelle métrique d'évaluation, appelée Intersection over Union 3D, dédiée à la détection d'objets 3D. Nous démontrons l'utilité de notre jeu de données dans les tâches de détection d'objets 3D en fournissant des modèles de référence entraînés sur ce jeu de données. L'ensemble des données et le code source d'évaluation sont disponibles en ligne à l'adresse http://www.objectron.dev