HyperAIHyperAI

Command Palette

Search for a command to run...

Génération de graphes de scène sans biais à partir d'un entraînement biaisé

Kaihua Tang Yulei Niu Jianqiang Huang Jiaxin Shi Hanwang Zhang

Résumé

La tâche de génération de graphes de scène (SGG) d'aujourd'hui est encore loin d'être pratique, principalement en raison du biais d'entraînement sévère, par exemple, la réduction de diverses actions comme « une personne marche sur / s'assoit sur / se couche sur une plage » à « une personne sur une plage ». Avec un tel SGG, les tâches en aval, telles que la question-réponse visuelle (VQA), ne peuvent guère inférer des structures de scène plus précises qu'un simple sac d'objets. Cependant, le débiaisage dans le SGG n'est pas trivial car les méthodes traditionnelles de débiaisage ne peuvent pas distinguer entre le bon et le mauvais biais, par exemple, un bon a priori contextuel (comme « une personne lit un livre » plutôt que « mange ») et un mauvais biais à queue longue (comme « près » dominé par « derrière / devant »).Dans cet article, nous présentons un nouveau cadre de SGG basé sur l'inférence causale et non sur la vraisemblance conventionnelle. Nous construisons d'abord un graphe causal pour le SGG et effectuons l'entraînement biaisé traditionnel avec ce graphe. Ensuite, nous proposons d'utiliser la causalité contre-factuelle issue du graphe entraîné pour inférer l'effet du mauvais biais, qui doit être éliminé. Plus précisément, nous utilisons l'Effet Direct Total (EDT) comme score prédicatif final proposé pour un SGG sans biais.Il convient de noter que notre cadre est indifférent au modèle de SGG utilisé et peut donc être largement appliqué dans la communauté qui cherche des prédictions sans biais. En utilisant l'outil de diagnostic des graphes de scène proposé sur le banc d'essai Visual Genome et plusieurs modèles prédominants, nous avons observé des améliorations significatives par rapport aux méthodes précédentes les plus avancées.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Génération de graphes de scène sans biais à partir d'un entraînement biaisé | Articles | HyperAI