HyperAIHyperAI

Command Palette

Search for a command to run...

FEELVOS : Apprentissage Rapide de Plongements de Bout en Bout pour la Segmentation d'Objets Vidéo

Paul Voigtlaender Yuning Chai Florian Schroff Hartwig Adam Bastian Leibe Liang-Chieh Chen

Résumé

De nombreuses méthodes récentes réussies pour le segmentation d'objets dans les vidéos (VOS) sont excessivement complexes, dépendent fortement d'un ajustement fin sur la première image, et/ou sont lentes, ce qui limite leur utilité pratique. Dans cette étude, nous proposons FEELVOS comme une méthode simple et rapide qui ne nécessite pas d'ajustement fin. Pour segmenter une vidéo, FEELVOS utilise pour chaque image un plongement sémantique pixel par pixel associé à un mécanisme de correspondance globale et locale afin de transférer des informations de la première image et de l'image précédente de la vidéo à l'image actuelle. Contrairement aux travaux antérieurs, notre plongement n'est utilisé que comme guide interne d'un réseau convolutif. Notre nouvelle tête de segmentation dynamique nous permet d'entraîner le réseau, y compris le plongement, en bout-à-bout pour la tâche de segmentation d'objets multiples avec une perte de cross-entropy. Nous atteignons un nouveau niveau d'excellence dans la segmentation d'objets dans les vidéos sans ajustement fin avec une mesure J&F de 71,5 % sur l'ensemble de validation DAVIS 2017. Nous mettons notre code et nos modèles à disposition sur https://github.com/tensorflow/models/tree/master/research/feelvos.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
FEELVOS : Apprentissage Rapide de Plongements de Bout en Bout pour la Segmentation d'Objets Vidéo | Articles | HyperAI