HyperAIHyperAI

Command Palette

Search for a command to run...

Réseau de pondération cross-modale pour la détection d'objets saillants RGB-D

Gongyang Li Zhi Liu Linwei Ye Yang Wang Haibin Ling

Résumé

Les cartes de profondeur contiennent des indices géométriques utiles pour aider à la détection d'objets saillants (SOD). Dans cet article, nous proposons une nouvelle stratégie de pondération intermodale (CMW) afin de favoriser des interactions complètes entre les canaux RGB et profondeur pour la détection d'objets saillants en RGB-D. Plus précisément, trois modules d'interaction RGB-profondeur, nommés CMW-L, CMW-M et CMW-H, sont conçus pour traiter respectivement la fusion d'informations intermodales de basse, moyenne et haute niveau. Ces modules utilisent une pondération de profondeur vers RGB (DW) et une pondération RGB vers RGB (RW) afin de permettre des interactions riches entre modalités et entre échelles au sein des couches de caractéristiques générées par différents blocs réseaux. Pour entraîner efficacement le réseau de pondération intermodale proposé (CMWNet), nous avons conçu une fonction de perte composite qui synthétise les erreurs entre les prédictions intermédiaires et les étiquettes de référence à différentes échelles. Grâce à la collaboration de tous ces composants novateurs, CMWNet fusionne efficacement les informations provenant des canaux RGB et profondeur tout en explorant la localisation des objets et les détails à plusieurs échelles. Des évaluations approfondies démontrent que CMWNet surpasse de manière cohérente 15 méthodes de pointe en détection d'objets saillants RGB-D sur sept benchmarks populaires.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp