HyperAIHyperAI

Command Palette

Search for a command to run...

Faire danser les pixels : génération vidéo à haute dynamique

Yan Zeng Guoqiang Wei Jiani Zheng Jiaxin Zou Yang Wei Yuchen Zhang Hang Li

Résumé

La création de vidéos à fort dynamisme, telles que des actions riches en mouvement ou des effets visuels complexes, constitue un défi majeur dans le domaine de l’intelligence artificielle. Malheureusement, les méthodes actuelles de pointe en génération vidéo, principalement axées sur la génération vidéo à partir de texte, ont tendance à produire des séquences vidéo avec des mouvements très limités, bien qu’elles préservent une fidélité élevée. Nous soutenons que se fier uniquement aux instructions textuelles est insuffisant et sous-optimal pour la génération vidéo. Dans cet article, nous proposons PixelDance, une nouvelle approche fondée sur les modèles de diffusion, qui intègre des instructions images pour les premières et dernières trames, combinées à des instructions textuelles pour la génération vidéo. Les résultats expérimentaux complets démontrent que PixelDance, entraîné sur des données publiques, présente une capacité nettement supérieure à la synthèse de vidéos comprenant des scènes complexes et des mouvements intriqués, établissant ainsi une nouvelle norme dans le domaine de la génération vidéo.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp