HyperAIHyperAI

Command Palette

Search for a command to run...

Réseau neuronal graphique de contenu de frontière pour la génération de propositions d'actions temporelles

Yueran Bai extsuperscript1 extsuperscript*† Yingying Wang extsuperscript2 extsuperscript* Yunhai Tong extsuperscript1 extsuperscript‡ Yang Yang extsuperscript2 Qiyue Liu extsuperscript2 Junhui Liu extsuperscript2 extsuperscript‡

Résumé

La génération de propositions d'actions temporelles joue un rôle crucial dans la compréhension des actions vidéo, nécessitant une localisation précise du contenu d'action de haute qualité. Cependant, générer des propositions temporelles avec à la fois des limites précises et un contenu d'action de haute qualité est extrêmement difficile. Pour résoudre ce problème, nous proposons un nouveau réseau neuronal graphique de frontières et de contenu (BC-GNN) pour modéliser les relations pertinentes entre les frontières et le contenu d'action des propositions temporelles grâce aux réseaux neuronaux graphiques. Dans le BC-GNN, les frontières et le contenu des propositions temporelles sont considérés comme les nœuds et les arêtes du réseau neuronal graphique, respectivement, où ils sont liés spontanément. Ensuite, une nouvelle opération de calcul graphique est proposée pour mettre à jour les caractéristiques des arêtes et des nœuds. Par la suite, une arête mise à jour et les deux nœuds qu'elle relie sont utilisés pour prédire les probabilités de frontière et le score de confiance du contenu, qui seront combinés pour générer une proposition finale de haute qualité. Des expériences ont été menées sur deux ensembles de données principaux : ActivityNet-1.3 et THUMOS14. Sans ajouts superflus, le BC-GNN surpassent les méthodes précédentes de pointe dans les tâches de génération de propositions d'actions temporelles et de détection d'actions temporelles.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Réseau neuronal graphique de contenu de frontière pour la génération de propositions d'actions temporelles | Articles | HyperAI