HyperAIHyperAI

Command Palette

Search for a command to run...

Détection et suivi : estimation de pose efficace dans les vidéos

Rohit Girdhar extsuperscript1 extsuperscript* Georgia Gkioxari extsuperscript2 Lorenzo Torresani extsuperscript2,3 extsuperscript* Manohar Paluri extsuperscript2 Du Tran extsuperscript2

Résumé

Ce travail aborde le problème de l'estimation et du suivi des points clés du corps humain dans des vidéos complexes impliquant plusieurs personnes. Nous proposons une approche extrêmement légère mais très efficace qui s'appuie sur les derniers progrès en matière de détection humaine et de compréhension vidéo. Notre méthode fonctionne en deux étapes : l'estimation des points clés dans les images ou les courts extraits, suivie d'un suivi léger pour générer des prédictions de points clés liées sur toute la durée de la vidéo. Pour l'estimation de la posture au niveau des images, nous expérimentons avec Mask R-CNN, ainsi qu'avec notre propre extension 3D de ce modèle, qui utilise les informations temporelles sur de petits extraits pour produire des prédictions d'images plus robustes. Nous menons des expériences ablatives approfondies sur le nouveau banc d'essai PoseTrack pour l'estimation de la posture humaine dans les vidéos à plusieurs personnes, afin de valider divers choix de conception de notre modèle. Notre approche atteint une précision de 55,2 % sur l'ensemble de validation et de 51,8 % sur l'ensemble de test en utilisant la métrique Multi-Object Tracking Accuracy (MOTA), et obtient des performances d'état de l'art lors du défi PoseTrack d'estimation et de suivi des points clés organisé par ICCV 2017.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Détection et suivi : estimation de pose efficace dans les vidéos | Articles | HyperAI