HyperAIHyperAI

Command Palette

Search for a command to run...

SNARF : Écorçage différentiable avant pour l'animation de formes implicites neurales non rigides

Xu Chen Yufeng Zheng Michael J. Black Otmar Hilliges Andreas Geiger

Résumé

Les représentations implicites neuronales de surfaces ont émergé comme un paradigme prometteur pour capturer des formes 3D de manière continue et indépendante de la résolution. Toutefois, leur adaptation aux formes articulées s’avère non triviale. Les approches existantes apprennent un champ de déformation inverse qui associe les points déformés aux points canoniques. Ce procédé présente toutefois un inconvénient majeur : le champ de déformation inverse dépend de la configuration (pose) et nécessite donc de grandes quantités de données pour être appris efficacement. Pour remédier à ce problème, nous introduisons SNARF, une méthode qui combine les avantages du skinning linéaire par mélange (LBS) appliqué aux maillages polygonaux avec ceux des surfaces implicites neuronales, en apprenant un champ de déformation directe sans supervision directe. Ce champ de déformation est défini dans un espace canonique indépendant de la pose, permettant ainsi une généralisation à des poses inédites. L’apprentissage du champ de déformation à partir de maillages en posture seule est difficile, car les correspondances des points déformés sont définies de manière implicite et peuvent ne pas être uniques en cas de changement de topologie. Nous proposons donc un modèle de skinning direct qui détermine toutes les correspondances canoniques d’un point déformé à l’aide d’une recherche itérative de racines. Nous dérivons des gradients analytiques via la différentiation implicite, permettant une formation end-to-end à partir de maillages 3D soumis à des transformations osseuses. Par rapport aux représentations implicites neuronales de pointe, notre approche se généralise mieux à des poses inédites tout en préservant une haute précision. Nous démontrons la robustesse de notre méthode dans des scénarios difficiles, incluant des humains 3D (vêtu) dans des poses variées et inédites.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp