HyperAIHyperAI

Command Palette

Search for a command to run...

Apprentissage conjoint de caractéristiques et modélisation des relations pour le suivi : un cadre à flux unique

Botao Ye Hong Chang Bingpeng Ma Shiguang Shan Xilin Chen

Résumé

Le cadre de suivi à deux flux et deux étapes actuellement populaire extrait les caractéristiques du modèle et de la région de recherche séparément, puis effectue la modélisation des relations. Par conséquent, les caractéristiques extraites manquent de conscience cible et ont une capacité limitée à discriminer entre la cible et l'arrière-plan. Pour résoudre ce problème, nous proposons un nouveau cadre de suivi à flux unique (OSTrack) qui unifie l'apprentissage des caractéristiques et la modélisation des relations en reliant les paires d'images modèle-recherche avec des flux d'information bidirectionnels. De cette manière, des caractéristiques orientées cible et discriminantes peuvent être extraites dynamiquement par une guidance mutuelle. Comme aucun module supplémentaire de modélisation des relations lourd n'est nécessaire et que l'implémentation est hautement parallélisée, le traceur proposé fonctionne à une vitesse rapide. Pour améliorer encore davantage l'efficacité de l'inférence, un module d'élimination précoce des candidats dans le réseau est proposé, basé sur une forte similarité a priori calculée dans le cadre à flux unique. En tant que cadre unifié, OSTrack atteint des performances de pointe sur plusieurs benchmarks, en particulier il obtient des résultats impressionnants sur le benchmark de suivi mono-shot GOT-10k, soit 73,7 % AO, améliorant le meilleur résultat existant (SwinTrack) de 4,3 %. De plus, notre méthode maintient un bon compromis entre performance et vitesse et montre une convergence plus rapide. Le code source et les modèles sont disponibles sur https://github.com/botaoye/OSTrack.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Apprentissage conjoint de caractéristiques et modélisation des relations pour le suivi : un cadre à flux unique | Articles | HyperAI