HyperAIHyperAI

Command Palette

Search for a command to run...

Synthèse de Scène à Partir du Mouvement Humain

Sifan Ye Yixing Wang Jiaman Li Dennis Park C. Karen Liu Huazhe Xu Jiajun Wu

Résumé

La capture à grande échelle du mouvement humain dans des scènes diverses et complexes, bien qu'extrêmement utile, est souvent considérée comme excessivement coûteuse. Cependant, le mouvement humain seul contient des informations riches sur la scène dans laquelle il se trouve et avec laquelle il interagit. Par exemple, une personne assise suggère l'existence d'une chaise, et sa position des jambes implique davantage la posture de cette chaise. Dans cet article, nous proposons de synthétiser des scènes diverses, sémantiquement raisonnables et physiquement plausibles basées sur le mouvement humain. Notre cadre, appelé Scene Synthesis from HUMan MotiON (SUMMON) (Synthèse de Scène à partir du Mouvement Humain), comprend deux étapes. Il utilise d'abord ContactFormer, notre nouveau prédicteur de contact, pour obtenir des étiquettes de contact temporellement cohérentes à partir du mouvement humain. Sur la base de ces prédictions, SUMMON sélectionne ensuite les objets en interaction et optimise les pertes de plausibilité physique ; il peuple également la scène avec des objets qui n'interagissent pas avec les humains. Les résultats expérimentaux montrent que SUMMON synthétise des scènes réalisables, plausibles et diversifiées, et possède le potentiel de générer d'importants ensembles de données sur l'interaction homme-scène pour la communauté scientifique.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Synthèse de Scène à Partir du Mouvement Humain | Articles | HyperAI