HyperAIHyperAI

Command Palette

Search for a command to run...

Découverte automatique de concepts de mode spatialement conscients

Xintong Han; Zuxuan Wu; Phoenix X. Huang; Xiao Zhang; Menglong Zhu; Yuan Li; Yang Zhao; Larry S. Davis

Résumé

Ce travail propose une approche automatique de découverte de concepts spatialement conscients en utilisant des données image-texte faiblement étiquetées provenant de sites de shopping. Nous commençons par affiner GoogleNet en modélisant conjointement les images de vêtements et leurs descriptions correspondantes dans un espace d'embedding visuel-sémantique. Ensuite, pour chaque attribut (mot), nous générons sa représentation spatialement consciente en combinant son vecteur sémantique lexical avec sa représentation spatiale dérivée des cartes de convolution du réseau affiné. Les représentations spatialement conscientes ainsi obtenues sont ensuite utilisées pour regrouper les attributs en plusieurs clusters afin de former des concepts spatialement conscients (par exemple, le concept du col pourrait inclure des attributs tels que col en V, col rond, etc.). Enfin, nous décomposons l'espace d'embedding visuel-sémantique en plusieurs sous-espaces spécifiques aux concepts, ce qui facilite la navigation structurée et la recherche de produits par retour d'attribut en exploitant les régularités linguistiques multimodales. Nous avons mené des expériences approfondies sur notre nouveau jeu de données Fashion200K, et les résultats évalués sur la qualité du clustering et la tâche de recherche de produits par retour d'attribut démontrent l'efficacité de nos concepts spatialement conscients découverts automatiquement.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp