HyperAIHyperAI

Command Palette

Search for a command to run...

ShareCMP : Segmentation sémantique RGB-P sensible à la polarisation

Zhuoyan Liu Bo Wang Lizhi Wang Chenyu Mao Ye Li

Résumé

La segmentation sémantique multimodale connaît un développement rapide, mais le modalité RGB-Polarisation reste largement sous-exploitée. Pour approfondir ce problème, nous avons construit un benchmark UPLight RGB-P comprenant 12 classes sémantiques typiques sous-marines. Dans ce travail, nous proposons ShareCMP, un cadre de segmentation sémantique RGB-P reposant sur une architecture à double branche partagée, qui réduit le nombre de paramètres d’environ 26 à 33 % par rapport aux modèles précédents à double branche. Ce cadre intègre un module appelé Polarization Generate Attention (PGA), conçu pour générer des images de modalité polarisation riches en propriétés polarimétriques, destinées à l’encodeur. Par ailleurs, nous introduisons une fonction de perte nommée Class Polarization-Aware Loss (CPALoss), permettant d’améliorer l’apprentissage et la compréhension par l’encodeur des informations relatives à la modalité polarisation, tout en optimisant le module PGA. Des expériences étendues menées sur trois benchmarks RGB-P distincts montrent que ShareCMP atteint des performances de pointe en termes de mIoU, avec un nombre réduit de paramètres, sur les jeux de données UPLight (92,45 % (+0,32 %)), ZJU (92,7 % (+0,1 %)) et MCubeS (50,99 % (+1,51 %)), surpassant ainsi les méthodes précédentes. Le code source est disponible à l’adresse suivante : https://github.com/LEFTeyex/ShareCMP.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp