HyperAIHyperAI

Command Palette

Search for a command to run...

Fusion multi-tâche pour une segmentation panoramique et partielle efficace

Sravan Kumar Jagadeesh; René Schuster; Didier Stricker

Résumé

Dans cet article, nous présentons un nouveau réseau capable de générer des segmentations sémantiques, par instance et par partie en utilisant un encodeur partagé, et qui les fusionne efficacement pour atteindre une segmentation panoptique-partielle. L'unification de ces trois problèmes de segmentation permet d'améliorer mutuellement et de manière cohérente l'apprentissage des représentations. Pour fusionner efficacement les prédictions des trois têtes, nous introduisons un module de fusion conjointe sans paramètre qui équilibre dynamiquement les logits et les fusionne pour créer une segmentation panoptique-partielle. Notre méthode est évaluée sur les jeux de données Cityscapes Panoptic Parts (CPP) et Pascal Panoptic Parts (PPP). Pour CPP, le PartPQ de notre modèle proposé avec la fusion conjointe dépasse l'état de l'art précédent de 1,6 et 4,7 points de pourcentage pour toutes les zones et tous les segments avec parties, respectivement. Sur PPP, notre fusion conjointe surpasse un modèle utilisant la stratégie précédente de fusion descendante par 3,3 points de pourcentage en PartPQ et 10,5 points de pourcentage en PartPQ pour les classes partitionnables.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp