Synthehicle : Suivi multi-véhicules multi-caméras dans les villes virtuelles

Les applications de la ville intelligente, telles que le routage intelligent du trafic ou la prévention des accidents, s'appuient sur des méthodes de vision par ordinateur pour une localisation et un suivi précis des véhicules. En raison de la rareté de données étiquetées avec précision, la détection et le suivi en 3D des véhicules à partir de plusieurs caméras constituent un défi important à explorer. Nous présentons un vaste ensemble de données synthétiques pour le suivi et la segmentation de plusieurs véhicules dans des vues caméra superposées et non superposées. Contrairement aux jeux de données existants, qui ne fournissent que des vérités terrain pour les boîtes englobantes 2D, notre ensemble de données contient également des étiquettes parfaites pour les boîtes englobantes 3D dans les coordonnées caméra et mondiales, l'estimation de profondeur, ainsi que la segmentation d'instances, sémantique et panoptique. Cet ensemble de données comprend 17 heures de matériel vidéo étiqueté, enregistré à partir de 340 caméras dans 64 scènes diverses comprenant des conditions diurnes, pluvieuses, crépusculaires et nocturnes, ce qui en fait le jeu de données le plus vaste jusqu'à présent pour le suivi multi-cibles multi-caméras. Nous fournissons des baselines pour la détection, la réidentification des véhicules et le suivi mono- et multi-caméras. Le code et les données sont disponibles au public.