HyperAIHyperAI

Command Palette

Search for a command to run...

Ray3D : estimation de la posture humaine 3D basée sur les rayons pour la localisation 3D absolue monoculaire

Yu Zhan Fenghai Li Renliang Weng Wongun Choi

Résumé

Dans cet article, nous proposons une nouvelle méthode d'estimation de la posture humaine 3D absolue basée sur des rayons monoculaires (Ray3D) avec une caméra calibrée. L'estimation précise et généralisable de la posture humaine 3D absolue à partir d'une entrée de posture 2D monoculaire est un problème mal posé. Pour relever ce défi, nous convertissons l'entrée de l'espace des pixels en rayons normalisés 3D. Cette conversion rend notre approche robuste aux changements des paramètres intrinsèques de la caméra. Pour traiter les variations des paramètres extrinsèques de la caméra dans le monde réel, Ray3D prend explicitement les paramètres extrinsèques de la caméra comme entrée et modélise conjointement la distribution entre les rayons de posture 3D et les paramètres extrinsèques de la caméra. Ce nouveau design de réseau est la clé de l'excellente généralisation de l'approche Ray3D. Afin d'avoir une compréhension complète de l'impact des variations des paramètres intrinsèques et extrinsèques de la caméra sur la précision de la localisation des points clés 3D absolus, nous menons des expériences systématiques approfondies sur trois benchmarks 3D mono-personne ainsi qu'un benchmark synthétique. Ces expériences montrent que notre méthode dépasse significativement les modèles existants les plus avancés. Notre code et le dataset synthétique sont disponibles à l'adresse suivante : https://github.com/YxZhxn/Ray3D .


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Ray3D : estimation de la posture humaine 3D basée sur les rayons pour la localisation 3D absolue monoculaire | Articles | HyperAI