Dans La Prochaine Mission Impossible, Tom Cruise N'a Plus Besoin D'un Assistant Humain, L'ia Suffit

—— Par Chao Shen Ke

Le déguisement est courant dans les films et les romans. Par exemple, dans le film à succès « Mission Impossible 6 », Benji (l'homme de main de Tom Cruise) a utilisé un faux visage pour révéler la véritable identité du méchant.

Tout au long de la série Mission Impossible, le changement de masque peut être considéré comme un mouvement standard.

Un magicien IA qui déguise les personnages dans les vidéos

En réalité, il n’est pas difficile de changer de visage. Le maquillage ou les masques faciaux personnalisés peuvent donner une apparence réelle au faux. De plus, il existe la technologie de « triche photo » vers laquelle tout le monde se rue.

Cependant, changer les visages des personnages dans les œuvres vidéo reste un grand défi, car changer les visages des images de personnages dynamiques nécessite de fortes capacités de traitement et de remplacement d'images.

Lorsqu'une œuvre est à mi-tournage et que des acteurs doivent être remplacés, ils modifient généralement le scénario ou trouvent une doublure ou ajoutent des effets spéciaux (il existe également la pratique de supprimer les scènes des personnages), mais ces méthodes sont coûteuses et peuvent également entraîner une perte de qualité.

Par exemple, la mort accidentelle de Paul Walker a été compensée dans « Fast & Furious 7 » de plusieurs manières, et la complexité du tournage a été augmentée plusieurs fois.

S'il est possible de « changer le visage » des personnages de la vidéo, ce problème peut être facilement résolu.

DeepFakes, un programme de changement de visage basé sur des algorithmes d'apprentissage automatique, est un tel magicien du changement de visage basé sur l'IA. À la fin de l’année dernière, les « DeepFakes » sont apparus de nulle part. Grâce à cela, les utilisateurs peuvent remplacer les personnages de la vidéo par leurs « idoles » préférées sans aucun sentiment de désobéissance.

Cependant, en raison de la puissante magie de ce programme, il a souvent été utilisé pour changer de visage dans des films pornographiques et des émissions de télévision depuis sa sortie. Les gens utilisent certains programmes pour transformer les protagonistes de films pornographiques en personnes qu’ils aiment voir. euh…

Son abus entraînera bientôt des problèmes de violation, de confidentialité et de sécurité. Finalement, parce qu'il a été découvert qu'il avait synthétisé illégalement des vidéos pornographiques et qu'il avait gravement enfreint des droits tels que le droit à l'image et le droit à la réputation, des sites Web tels que Twitter, PornHub et Reddit ont tous pris leurs distances et ont annoncé l'interdiction de la publication de contenu synthétisé par DeepFakes.

On pourrait croire qu’il a été relégué au palais froid, mais l’histoire est loin d’être terminée.

Les DeepFakes connaissent un nouveau souffle

Bien que DeepFakes ait été complètement interdit par plusieurs grands sites de réseaux sociaux, il n’a pas été éradiqué.

Ce qui lui a donné un nouveau souffle, c'est l'énorme force motrice de l'industrie du porno.

Naughty America, une société de production de films et de télévision pornographiques basée en Californie, aux États-Unis, a récemment lancé un service de personnalisation privé via DeepFakes. Les utilisateurs peuvent payer pour changer les visages des personnages dans les films AV.

Le service payant de Naughty America vous permet de changer non seulement le visage du personnage, mais également l'arrière-plan de la vidéo. Les conversions vidéo plus courtes peuvent coûter seulement quelques centaines de dollars, mais les plus complexes peuvent coûter jusqu'à des milliers de dollars.

En plus de payer les coûts de calcul du processeur, cet argent servira également à acheter les droits d'utilisation du portrait du personnage. Naughty America a donc résolu le problème de violation du droit d'auteur, mais la limitation est qu'il ne peut se convertir qu'en un « visage » sous licence.

En termes d'effets de conversion, Naughty America a mis à niveau DeepFakes, avec un bon effet de fusion lors de la conversion des visages et des arrière-plans, les rendant presque indiscernables. Cependant, pour se transformer en le visage qu'ils souhaitent, les utilisateurs doivent télécharger à l'avance un grand nombre de photos et de vidéos d'expression (bien sûr, elles n'impliquent pas de contenu contrefaisant) comme ensemble d'entraînement pour DeepFakes.

Pour garantir la sécurité, Naughty America ajoute des filigranes aux vidéos pour indiquer qu'il s'agit de vidéos « fausses ».

Alors, comment ce magicien IA parvient-il à « changer de visage » ? Nous l'avons simplement exploré par curiosité technologique. « Justice face.jpg »

Les tactiques DeepFakes démantelées

Au cœur de DeepFakes se trouve un modèle de réseau neuronal profond. Il comprend principalement un encodeur et un décodeur. Lors de la conversion de visage, l'encodeur encode l'image puis passe par le décodeur pour générer une nouvelle image.

Au cours du processus de candidature, la qualité de la conversion d'image doit être garantie et l'objet de conversion doit être identifié avec précision. Le modèle d'IA encodera et décodera respectivement les visages des personnages de la vidéo originale et les visages des personnes de remplacement, de sorte que lorsque les visages sont commutés, les expressions des deux peuvent correspondre une à une.

Laissez-moi vous expliquer cela avec un exemple. Ici, nous prendrons comme exemples les animateurs de talk-shows américains Jimmy Fallon et John Oliver et expliquerons brièvement comment remplacer le visage de Fallon par celui d'Oliver.

L’ensemble du processus est divisé en trois étapes.

Le même encodeur est utilisé pour les deux faces, le décodeur A émettant Fallon et le décodeur B émettant Oliver.

1) Coder et décoder respectivement Fallon et Oliver, afin que le modèle puisse reconnaître les expressions faciales de Fallon et Oliver à partir d'images complexes et marquer les expressions faciales ;

2) Répétez l'étape 1) jusqu'à ce que les deux décodeurs puissent restaurer les visages des deux personnes respectivement, et que l'encodeur puisse distinguer Fallon et Oliver à partir des informations faciales clés grâce à l'apprentissage ;

3) Après avoir terminé les étapes ci-dessus, réencodez la photo sortie par le décodeur A et utilisez directement le décodeur B pour remplacer le visage de Fallon par le visage d'Oliver en fonction des caractéristiques de l'expression faciale.

De cette façon, le visage de Fallon peut être parfaitement remplacé par celui d'Oliver. Cela semble incroyable, mais avec l’aide des puissantes capacités de traitement de données des réseaux neuronaux, cela peut être réalisé tant que le matériel ne tombe pas en panne. Cependant, en raison des données limitées dans l’ensemble d’entraînement, l’effet de fusion des expressions simples est bien meilleur que celui des expressions complexes.

La faiblesse des DeepFakes

Bien que l’effet de fusion de DeepFakes soit très bon, il semble qu’il existe certaines limites dans le processus de pratique spécifique.

Premièrement, DeepFakes nécessite beaucoup d’images pour s’entraîner

Dans une vidéo, si vous souhaitez changer le visage d'un personnage de la vidéo, vous avez besoin de 300 à 2000 images faciales. De plus, le nombre requis variera en fonction de la complexité de l’expression faciale et du degré de correspondance entre la nouvelle personne et la vidéo originale.

De cette façon, l’échange de visage actuel convient aux personnes qui ont un grand nombre de photos en ligne, comme les célébrités qui apparaissent fréquemment sur Internet. Il est donc difficile pour les DeepFakes de changer le visage de tout le monde.

Deuxièmement, les images utilisées pour la formation doivent avoir des caractéristiques

Les modèles d’IA s’appuient sur les photos sur lesquelles ils sont formés. Dans l'exemple de changement de visage ci-dessus, étant donné que l'ensemble de données ne contient pas de photo du profil latéral d'Oliver, DeepFakes ne peut pas restaurer le profil latéral d'Oliver. Par conséquent, si vous souhaitez une certaine expression faciale, les images de l’ensemble d’entraînement doivent contenir un grand nombre de cette expression.

Enfin, la formation du modèle de changement de visage prend du temps et demande beaucoup de travail.

Avec la technologie actuelle, le processus de changement de visage dans les vidéos est assez coûteux.

Il faut environ 48 heures pour effectuer un changement de visage normal sur DeepFakes, tandis qu'un déguisement plus détaillé nécessite environ 72 heures de formation.

De plus, la formation des modèles nécessite des exigences matérielles élevées. Louer un GPU à 0,50 $ par heure coûterait 36 $ simplement pour échanger les visages des personnages A et B, sans compter les frais de bande passante, les coûts du processeur et des E/S. Le coût n’est pas bas.

Cependant, même si DeepFakes est un luxe à utiliser, il semblerait que de nombreuses personnes sur Naughty America paient encore pour cela. Emmm... Il semble que la force motrice de « l'intérêt sexuel » soit toujours étonnante.

L'avenir de la technologie révolutionnaire pour le contenu vidéo

Si la technologie peut réduire les coûts, cette IA magicienne qui change de visage sera d’une grande utilité. Bien que l’industrie du porno soit le moteur de son développement, elle est bien plus qu’un simple outil permettant aux sociétés pornographiques de gagner de l’argent.

En plus du remplacement de personnages de films et de télévision mentionné initialement, les DeepFakes peuvent également jouer un rôle dans l'enregistrement de mémoires ou de documentaires. Il utilise des informations photographiques pour restaurer l'apparence des personnes décédées, ce qui serait impossible à réaliser pour les effets spéciaux et les maquilleurs.

Il existe également des articles qui mentionnent qu'il peut également être utilisé dans l'industrie de la publicité, et que les célébrités peuvent l'utiliser pour autoriser certaines publicités ennuyeuses.

Bien entendu, avant que ces applications ne soient mises en service, de nombreux problèmes doivent être résolus un par un, tels que la violation, la confidentialité, la sécurité et les abus.

Alors la question est, si vous pouviez changer de visage, qui voudriez-vous être ?