HyperAIHyperAI

Command Palette

Search for a command to run...

Puppeteer : Animer et contrôler vos modèles 3D

Chaoyue Song Xiu Li Fan Yang Zhongcong Xu Jiacheng Wei Fayao Liu Jiashi Feng Guosheng Lin Jianfeng Zhang

Résumé

Les applications interactives modernes exigent de plus en plus des contenus 3D dynamiques, mais la transformation de modèles 3D statiques en ressources animées constitue un goulot d’étranglement majeur dans les chaînes de création de contenu. Bien que les progrès récents des IA génératives aient révolutionné la création de modèles 3D statiques, le montage (rigging) et l’animation demeurent fortement dépendants de l’intervention d’experts. Nous présentons Puppeteer, un cadre complet qui aborde à la fois le montage automatique et l’animation pour une large diversité d’objets 3D. Notre système prédit d’abord des structures squelettiques plausibles grâce à un modèle transformer auto-régressif introduisant une stratégie de tokenisation basée sur les articulations pour une représentation compacte, ainsi qu’une méthodologie d’ordonnancement hiérarchique avec perturbation stochastique, qui améliore les capacités d’apprentissage bidirectionnel. Il infère ensuite les poids d’enveloppement (skinning weights) à l’aide d’une architecture fondée sur l’attention, intégrant une attention articulaire consciente de la topologie qui encode explicitement les relations entre articulations en fonction des distances dans le graphe squelettique. Enfin, nous complétons ces avancées en montage par une chaîne d’animation basée sur une optimisation différentiable, capable de générer des animations stables et de haute fidélité, tout en étant plus efficace sur le plan computationnel que les approches existantes. Des évaluations étendues sur plusieurs benchmarks démontrent que notre méthode surpasse significativement les techniques de pointe en termes de précision de prédiction squelettique et de qualité d’enveloppement. Le système traite robustement une grande variété de contenus 3D, allant des ressources de jeux professionnellement conçues aux formes générées par IA, produisant des animations cohérentes dans le temps et éliminant les problèmes de sursauts fréquents dans les méthodes actuelles.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp