Marine Video Kit : Un Nouveau Jeu de Données Vidéo Marin pour l'Analyse et la Récupération Par Contenu

L’analyse efficace de collections vidéo spécifiques à un domaine et inhabituelles représente un problème pratique important, où les modèles généraux d’avant-garde continuent de rencontrer des limites. Il est donc souhaitable de concevoir des jeux de données de référence capables de tester de nouveaux modèles puissants dans des domaines spécifiques, sous des contraintes supplémentaires. Il est essentiel de rappeler que les données spécifiques à un domaine peuvent être plus bruitées (par exemple, des vidéos endoscopiques ou sous-marines) et nécessitent souvent des utilisateurs expérimentés pour une recherche efficace. Dans cet article, nous nous concentrons sur des vidéos en prise unique réalisées à partir de caméras en mouvement dans des environnements sous-marins, ce qui constitue un défi non négligeable pour la recherche. Nous présentons la première partie d’un nouveau jeu de données, le Marine Video Kit, destiné à des tâches de recherche vidéo et d’autres défis en vision par ordinateur. Notre jeu de données a été utilisé dans une session spéciale lors du Video Browser Showdown 2023. En plus de statistiques de métadonnées de base, nous fournissons plusieurs analyses fondées sur des caractéristiques de bas niveau ainsi que des annotations sémantiques de trames clés sélectionnées. L’analyse inclut également des expériences mettant en évidence les limites des modèles généraux respectés en matière de récupération vidéo. Notre jeu de données et le code associé sont disponibles publiquement à l’adresse suivante : https://hkust-vgd.github.io/marinevideokit.