HyperAIHyperAI

Command Palette

Search for a command to run...

Recherche de personnes basée sur le texte avec des données limitées

Xiao Han Sen He Li Zhang Tao Xiang

Résumé

La recherche de personnes basée sur le texte (TBPS) vise à retrouver une personne cible dans une galerie d'images à partir d'une requête textuelle descriptive. Résoudre une tâche de recherche intermodale fine est un défi, qui est encore aggravé par le manque de jeux de données à grande échelle. Dans cet article, nous présentons un cadre doté de deux composants novateurs pour faire face aux problèmes posés par les données limitées. Premièrement, afin d'utiliser pleinement les petits jeux de données de référence existants pour une apprentissage plus discriminant des caractéristiques, nous introduisons un cadre d'apprentissage contrastif intermodal avec momentum pour enrichir les données d'entraînement d'un mini-lot donné. Deuxièmement, nous proposons de transférer les connaissances acquises à partir des grands jeux de données existants contenant des paires image-texte provenant de domaines problématiques radicalement différents, afin de compenser le manque de données d'entraînement pour la TBPS. Une méthode d'apprentissage par transfert est conçue pour permettre le transfert d'informations utiles malgré l'écart important entre les domaines. Grâce à ces composants, notre méthode atteint un nouveau niveau d'excellence sur le jeu de données CUHK-PEDES, avec des améliorations significatives par rapport aux travaux antérieurs en termes de Rank-1 et mAP. Notre code est disponible à l'adresse suivante : https://github.com/BrandonHanx/TextReID.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Recherche de personnes basée sur le texte avec des données limitées | Articles | HyperAI