HyperAIHyperAI

Command Palette

Search for a command to run...

RefineCap : Raffinement conscient des concepts pour la génération de légendes d’images

Yekun Chai Shuo Jin Junliang Xing

Résumé

La traduction automatique d’images en textes repose sur la compréhension de la scène image et la modélisation linguistique. Dans cet article, nous proposons un nouveau modèle, appelé RefineCap, qui affine le vocabulaire de sortie du décodeur linguistique à l’aide de sémantiques visuelles guidées par le décodeur, tout en apprenant implicitement la correspondance entre les mots-clés visuels et les images. La méthode proposée, appelée Réfinement des Concepts Visuels, permet au générateur de se concentrer sur les détails sémantiques présents dans l’image, conduisant ainsi à la génération de légendes plus descriptives sur le plan sémantique. Notre modèle obtient des performances supérieures sur le jeu de données MS-COCO par rapport aux modèles précédents basés sur les concepts visuels.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp