HyperAIHyperAI

Command Palette

Search for a command to run...

HybrIK-X : Cinématique inverse hybride analytico-neurale pour la récupération de maillages corporels complets

Jiefeng Li Siyuan Bian Chao Xu Zhicun Chen Lixin Yang Cewu Lu†, Member, IEEE

Résumé

La récupération d'un maillage corporel complet en inférant les paramètres de pose et de forme abstraits à partir du contenu visuel peut obtenir des corps 3D avec des structures réalistes. Cependant, le processus d'inférence est fortement non linéaire et souffre de désalignements entre l'image et le maillage, entraînant une reconstruction imprecise. En revanche, les méthodes d'estimation de points clés 3D utilisent la représentation volumétrique pour atteindre une précision au niveau du pixel, mais peuvent prédire des structures corporelles irréalistes. Pour résoudre ces problèmes, cet article présente une nouvelle solution hybride de cinématique inverse, HybrIK, qui intègre les avantages de l'estimation de points clés 3D et de la récupération de maillage corporel dans un cadre unifié. HybrIK transforme directement des articulations 3D précises en rotations de parties du corps via une décomposition en torsion et balancement (twist-and-swing). Les rotations de balancement sont résolues analytiquement avec les articulations 3D, tandis que les rotations de torsion sont dérivées à partir d'indices visuels grâce à des réseaux neuronaux. Pour capturer des détails corporels complets, nous avons également développé un cadre holistique, HybrIK-X, qui améliore HybrIK avec des mains articulées et un visage expressif. HybrIK-X est rapide et précis en résolvant la pose totale du corps avec un modèle mono-étape. Les expériences montrent que HybrIK et HybrIK-X conservent à la fois la précision des articulations 3D et la structure réaliste du modèle humain paramétrique, conduisant à une récupération de maillage corporel complet alignée au pixel. La méthode proposée surpasse considérablement les méthodes d'état de l'art sur diverses基准 (benchmarks) pour les scénarios ne concernant que le corps, uniquement les mains ou le corps entier. Le code source et les résultats peuvent être consultés à l'adresse suivante : https://jeffli.site/HybrIK-X/Note: I have used "基准" in parentheses as it is not a common term in French and might be better understood if the original term is provided. However, "benchmarks" is often used in French scientific literature as well, so you may choose to omit the Chinese term if preferred.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp