HyperAI

La Production De « Nezha », D'une Valeur De 3,6 Milliards De Dollars, a Pris Cinq Ans. Comment Les Difficultés De Création D’animation Ont-elles Été Résolues ?

特色图像

Depuis sa sortie le 26 juillet, « Nezha : L'Enfant du Diable entre dans le monde » a reçu des critiques élogieuses et son box-office a grimpé en flèche, dépassant désormais les 3,6 milliards. Derrière cette animation populaire se cachent 5 années de travail minutieux de la part de l'équipe créative. Au cours de ce long processus de production, la technologie de l'intelligence artificielle a favorisé le progrès de plusieurs liens, permettant à « Nezha » d'apparaître devant nous plus tôt.

Nezha bat encore le record !

Depuis sa sortie le 26 juillet, le film « Nezha : L'Enfant du Diable vient au monde » bat des records au box-office pour les films d'animation. Jusqu'à présent, le box-office total a dépassé 3,6 milliards,Plus de 1 000 téléspectateurs 100 millions !Il est devenu le premier film d'animation à avoir plus de 100 millions de téléspectateurs.

Avant Nezha, le record du box-office le plus élevé pour un film d'animation en Chine était de 1,5 milliard

Derrière la croissance folle du box-office, son score Douban reste également à 8,6 points,Beaucoup de gens ont commencé à soupirer : une étape importante dans l’animation chinoise est arrivée.

Comment un film adapté d’une histoire mythologique a-t-il pu devenir un outsider dans l’industrie de l’animation chinoise et atteindre un box-office aussi élevé ?

Est-ce que moi, Nezha, j'ai gagné autant de fans juste grâce à ma beauté ?

En plus des personnages subversifs et des tout nouveaux décors d'histoire, qui apportent des surprises au public,Effets visuels exquis,C'est aussi la raison pour laquelle « Nezha » est si populaire. Ces effets visuels sympas font de Nezha, déprimé et coquin, « diabolisé », le gars le plus « beau » de cet été.

La production d'animation qui a failli faire échouer Nezha

Lorsque le public est profondément attiré par ce garçon des plus « beaux », il n’aurait jamais pensé qu’il avait failli subir un accouchement difficile.

Derrière chaque film à succès, il y a le polissage minutieux de l'équipe créative principale, et les procédures lourdes rendent souvent le temps de production très long, et certaines œuvres peuvent même ne pas réussir et mourir à mi-chemin.

Le processus de production de Nezha n’a pas non plus été facile, mais heureusement, cela a pris beaucoup de temps.Cinq ansAprès une longue période, le problème a finalement été résolu.

Ce film d'animation de 110 minutes compte au total 66 foisModification du script, oui 20 Plusieurs équipes professionnelles d'externalisation,1600 De nombreux membres de l'équipe de production d'animation ont participé à la production, et l'ensemble du film a 1400 Plusieurs plans à effets spéciaux.

L'origine de l'armure Wanlong dans le film

De cela, nous pouvons voir qu’une excellente animation est destinée à être un projet énorme. De nombreux praticiens se sont plaints du fait que la production d’animation est une « Un travail acharné. »L'entretien avec le directeur a également révélé qu'en raison de la lourde charge de travail, le taux de rotation de l'équipe externalisée a fortement augmenté.

La production d'un grand nombre de personnages, le dessin d'animation du storyboard et les effets spéciaux sont tous des processus qui prennent du temps et demandent beaucoup de travail. Une courte vidéo d’un peu plus de dix secondes peut nécessiter les efforts de plusieurs équipes pendant plusieurs mois.

La laide Nezha devient belle après avoir été transformée en démon

Malgré les efforts considérables de l'équipe,Mais il reste encore de nombreux problèmes qui ne peuvent être résolus par une simple lutte acharnée.Par exemple, lorsque la perle spirituelle et la pilule magique se sont combinées dans le film, le réalisateur a voulu créer un effet visuel de retour en arrière dans le temps et de retour de tout à l'un. Mais après plusieurs mois d’expérimentation, l’objectif a été abandonné car il ne répondait pas aux attentes.

Les difficultés de production comme celles-ci constituent un facteur majeur limitant le développement de l’animation. Si le processus de production pouvait être plus efficace, peut-être que davantage de films de meilleure qualité pourraient émerger. À cet égard,La technologie de l’intelligence artificielle peut apporter de nouvelles opportunités à l’industrie de l’animation.

  Libérer l'artiste original : coloriage de dessins au trait par IA

Dans le processus de production d'animation, le lien de base est de terminer le dessin des dessins, et la coloration de ces dessins est un projet énorme.

Il convient de mentionner que l’image de Nezha a été conçue dans plus de 100 versions.

Pour une animation normale de 12 images par seconde, d'une durée de 25 minutes, 18 000 images sont nécessaires. Pour une équipe de 10 personnes, il faut environ 2 moisÀ compléter.

Mais avec les outils basés sur l’IA, l’efficacité sera grandement améliorée. Par exemple, la technologie la plus avancée disponible aujourd’hui ne nécessite que 2,5 heures,L'amélioration de l'efficacité atteinte 2000 foisAutant que.

Récemment, le nombre d'étoiles sur GitHub a dépassé les 10 000 Style2paints,C'est un outil de dessin tellement magique. Grâce à lui, le personnel de production peut réaliser rapidement des processus de coloration complexes.

Il y a quatre étapes : commencez par le dessin au trait, ajoutez une couleur plate dans le coin supérieur droit, ajoutez un dégradé de couleur dans le coin inférieur gauche et ajoutez une ombre dans le coin inférieur droit.

Style2paints a été créé conjointement par des chercheurs de l'Université de Soochow et de l'Université chinoise de Hong Kong, et la dernière version a été mise à niveau vers la V4. Il est également considéré comme le meilleur outil d'IA pour la coloration des dessins au trait.

Style2paints est basé surApprentissage profond non supervisé,passerTransfert de styleet Technologie GAN, transformant le dessin au trait original en une image riche en couleurs.

Le processus est divisé en deux étapes, la première consistant à transformer l'esquisse en un dessin en couleur brut. Pour compléter le tableau, la deuxième étape identifie ses erreurs et l'affine pour obtenir le résultat final.

Il est également très simple à utiliser. L'artiste n'a plus qu'à terminer le dessin au trait, puis à cliquer sur la souris pour obtenir un dessin en couleur. Pour les peintres exigeants, quelques ajustements peuvent être nécessaires.

Guide pratique sur GitHub

Libérer les animateurs : un réseau neuronal remplit automatiquement les cadres

Dans la production de films d'animation, il existe des images clés et des images intermédiaires. Les images intermédiaires sont les images enfilées entre deux images clés, qui servent à connecter et à rendre les images fluides, mais leur production est un processus très long en animation.

Les trois actions les plus sombres sont les images clés, et les plus claires sont les images du milieu.

Si nous donnons à l’IA une série d’images clés adjacentes dans une vidéo et lui demandons de remplir le milieu de l’image, la charge de travail sera considérablement réduite.

Le modèle génératif publié par Google AI il y a quelque temps suit cette idée et résout le problème dans une certaine mesure.

Diagramme du modèle

Le système d'IA qu'ils ont publié comprend unModèle entièrement convolutif,Il se compose d'un décodeur d'images convolutives 2D, d'un générateur de représentation latente convolutive 3D et d'un générateur vidéo.

En décodant l'image, en plus de décoder les informations vidéo d'entrée, les informations de la vidéo cible sont également mappées sur l'espace latent. Le générateur de représentation latente combine les deux informations, qui sont finalement décodées par le générateur vidéo pour obtenir les images intermédiaires prédites.

La séquence d'images vidéo générée par l'IA est stylistiquement cohérente avec les images de début et de fin données et semble globalement fluide. Étonnamment, cette méthode permet de générer des vidéos sur une période plus longue.

Vidéos créées à partir d'images fixes à l'aide du jeu de données Kinetics

Dans leur étude, certaines vidéos ont produit des résultats prometteurs, mais certaines vidéos complexes contenaient des images étranges et devaient encore être améliorées.

Libérer les réalisateurs : animation générée par texte

Bien sûr, la fonctionnalité la plus surprenante est peut-être que l’IA génère des animations directement à partir du script. Les effets de scène impossibles à produire peuvent être résolus entre les mains de l’IA.

Il y a quelque temps, des scientifiques de Disney et de l'Université Rutgers ont publié un article présentant un modèle d'IA qui génère des scènes animées à l'aide de descriptions textuelles.

Pour que l’IA puisse générer une vidéo à partir de texte, elle doit « comprendre » le texte, puis générer l’animation correspondante. Pour ce faire, ils ont utilisé un réseau neuronal composé de plusieurs composants modulaires.

Ce modèle se compose de trois parties :Module d'analyse de script, analyse automatiquement les scènes dans le texte du script, puisModule de traitement du langage naturel, peut extraire la phrase de description principale et affiner la représentation de l'action, et enfin unGénérer un module, convertir les instructions d'action en séquences d'animation.

Diagramme de processus du modèle

Les chercheurs ont collecté des milliers de scénarios de films disponibles gratuitement et ont sélectionné les 996, a compilé un corpus de descriptions de scènes. 

Ce corpus est constitué de 525 708La description comprend 1 402 864 phrases, dont 920 817 contiennent au moins une action.

Un mappage entre les descriptions et les vidéos est établi afin que des clips d'animation simples puissent être générés en saisissant le script. Dans l'expérience de test, l'animation généréeLa rationalité est 68%.

Bien que le système repose toujours sur un corpus et ne puisse pas achever complètement la génération de texte en vidéo, il apporte de nouvelles directions dans la production d'animation.

Disney a également étudié la génération automatique de mouvements de lèvres animés correspondant à la parole.

Dans quelle mesure l’IA est-elle susceptible de subvertir l’animation ?

La popularité de « Nezha » a une fois de plus attiré l'attention sur le potentiel des films d'animation, et ce film qui brise les traditions est toujours en passe d'établir de nouveaux records.

Bien qu’il y ait eu quelques bonnes tentatives d’utilisation de la technologie de l’IA dans la production d’animation, ces technologies ne peuvent être véritablement utilisées par les cinéastes que lorsqu’elles deviennent plus parfaites et plus matures.

Nous attendons avec impatience le développement de la technologie dans le futur afin que nous n’ayons pas à attendre cinq longues années pour voir plus de classiques comme « Nezha ».

-- sur--

Cliquez pour lire l'article original