HyperAIHyperAI

Command Palette

Search for a command to run...

URVOS : Réseau de segmentation d'objets vidéo référentiels unifié avec une base de données à grande échelle

Joon-Young Lee Seonguk Seo Bohyung Han

Résumé

Nous proposons un réseau unifié de segmentation d'objets dans les vidéos par référence linguistique (URVOS). URVOS prend en entrée une vidéo et une expression référentielle, et estime les masques des objets mentionnés par l'expression linguistique dans l'ensemble des cadres vidéo. Notre algorithme aborde ce problème difficile en effectuant conjointement la segmentation d'objets basée sur le langage et la propagation de masques à l'aide d'un seul réseau neuronal profond, combinant de manière appropriée deux modèles d'attention. En outre, nous avons construit le premier jeu de données à grande échelle pour la segmentation d'objets vidéo référentielle, appelé Refer-Youtube-VOS. Nous évaluons notre modèle sur deux jeux de données de référence, dont le nôtre, et démontrons l'efficacité de l'approche proposée. Le jeu de données est disponible à l'adresse suivante : url{https://github.com/skynbe/Refer-Youtube-VOS}.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
URVOS : Réseau de segmentation d'objets vidéo référentiels unifié avec une base de données à grande échelle | Articles | HyperAI