HyperAIHyperAI

Command Palette

Search for a command to run...

Qu'y a-t-il dans le flux ? Exploitation des indices de mouvement temporel pour la détection non supervisée de frontières d'événements génériques

Sourabh Vasant Gothe Vibhav Agarwal Sourav Ghosh Jayesh Rajkumar Vachhani Pranay Kashyap Barath Raj Kandur Raja

Résumé

La tâche de détection générique des frontières d'événements (GEBD) vise à reconnaître des frontières génériques, indépendantes de la taxonomie, qui segmentent une vidéo en événements significatifs. Les méthodes actuelles impliquent généralement un modèle neuronal formé sur un grand volume de données, nécessitant une puissance de calcul et une capacité de stockage considérables. Nous explorons deux questions cruciales liées au GEBD : les algorithmes non paramétriques peuvent-ils surpasser les méthodes neuronales non supervisées ? L'information de mouvement seule suffit-elle pour obtenir des performances élevées ? Cette enquête nous pousse à exploiter algorithmiquement les indices de mouvement pour identifier les frontières d'événements génériques dans les vidéos. Dans ce travail, nous proposons FlowGEBD, une technique non paramétrique et non supervisée pour le GEBD. Notre approche comprend deux algorithmes utilisant le flux optique : (i) Suivi des pixels et (ii) Normalisation du flux. En menant des expérimentations approfondies sur les jeux de données difficiles Kinetics-GEBD et TAPOS, nos résultats établissent FlowGEBD comme la nouvelle référence en matière de méthodes non supervisées (SOTA). FlowGEBD dépasse les modèles neuronaux sur le jeu de données Kinetics-GEBD en obtenant un score [email protected] de 0,713 avec un gain absolu de 31,7 % par rapport à la méthode baseline non supervisée et atteint un score F1 moyen de 0,623 sur le jeu de données de validation TAPOS.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Qu'y a-t-il dans le flux ? Exploitation des indices de mouvement temporel pour la détection non supervisée de frontières d'événements génériques | Articles | HyperAI