HyperAI

Un Célèbre Programmeur YouTube Restaure D'anciennes Vidéos Street View Des États-Unis, Du Japon Et De Russie

il y a 5 ans
Titres
Vrais potins
神经小兮
特色图像

Il y a un maître Up sur YouTube qui est accro à la restauration de vidéos historiques. À l’heure actuelle, il utilise la technologie de l’IA pour restaurer des vidéos de rue de New York, de Tokyo et d’autres lieux datant d’il y a cent ans. Après avoir vécu les scènes de rue du vieux Pékin il y a cent ans la dernière fois, voyageons dans les rues de Tokyo et de New York il y a cent ans !

Vous souvenez-vous de la vidéo d’une scène de rue de Pékin restaurée par l’IA il y a cent ans et qui était populaire sur Internet ? (Voir« Vidéo d'une scène de rue de Pékin en République de Chine, restaurée par l'IA, populaire sur Internet et vous faisant voyager dans le temps »

À quoi ressemblaient les autres villes du monde à la même période ? Denis Shiryaev, un ingénieur russe, a utilisé la technologie de l'IA pour restaurer de nombreuses anciennes vidéos et est devenu populaire sur YouTube.

De Moscou en 1896, à New York en 1911, puis à Tokyo en 1913, Denis a permis aux internautes de ressentir les coutumes de ces villes il y a cent ans.

La restauration du « Train arrivant à la gare » est devenue un succès

En février de cette année, Denis Shiryaev a mis en ligne sur YouTube une vidéo du premier film de l'histoire de l'humanité restauré à l'aide de la technologie de l'IA - « L'arrivée d'un train à la gare ».

À sa grande surprise, la vidéo est devenue une sensation du jour au lendemain et, à ce jour, le film restauré a été visionné plus de 4 millions de fois. 

La version sonore couleur restaurée de « L'arrivée d'un train »

125 ans plus tard, le film muet original en noir et blanc de 50 secondes a été colorisé par Denis à l'aide de la technologie de l'IA et mis à niveau vers une version haute définition avec une qualité d'image 4K et 60 ips, nous permettant aujourd'hui de voir une image historique plus réaliste.

Restauration vidéo à New York, Tokyo et Moscou : les internautes doivent rendre leurs devoirs

Après que son premier travail de restauration ait reçu un énorme écho, Denis, à la demande de nombreux internautes, a restauré plusieurs autres vieilles vidéos pour emmener tout le monde découvrir Moscou, New York et Tokyo il y a cent ans.

Denis Shiryaev au milieu 

 Moscou 1896 : une rue commerçante animée 

La machine à remonter le temps de Denis a choisi Moscou pour la première fois en 1896. La ville a été construite le long de la rivière Moscou en 1147 et a une histoire de près de 900 ans.

À la fin du XIXe siècle, la Russie venait de terminer la révolution industrielle et comptait plus de 20 000 entreprises industrielles et commerciales.Le nombre de travailleurs a atteint 120 000.

La rue Tverskaïa est toujours le centre commercial et de divertissement le plus prospère de Moscou.

La vidéo enregistre la rue Tverskaïa à Moscou, bordée de boutiques et animée par des calèches, des policiers et des marchands.

À moins de 2 kilomètres, vous pourrez vous promener le long de cette rue jusqu'au célèbre Kremlin, qui était à l'époque la résidence du tsar et qui est aujourd'hui le palais présidentiel de la Russie.

 1911 New York : le rêve américain des immigrants européens 

Denis a également sélectionné une célèbre vidéo de la ville de New York de 1911 à restaurer.

Cette vidéo de 8 minutes et 35 secondes ramène les gens en 1911, lorsque les États-Unis étaient dans une période d'urbanisation rapide et que la deuxième révolution industrielle créait un grand nombre d'emplois aux États-Unis.

Le film original a été tourné par une société suédoise et s'intitulait « Journey to New York ».

Ouvert par le Musée d'Art Moderne en 2018

À la fin du XIXe siècle et au début du XXe siècle, un grand nombre d'Européens, au chômage en raison de la stagnation sociale, ont choisi de traverser l'océan pour poursuivre le « rêve américain ».

L’immigration en provenance d’Europe atteint son apogée. Le plus célèbre d'entre eux fut le Titanic, qui quitta la Grande-Bretagne en avril 1912.

Au début de « Un voyage à New York », un bateau de croisière navigue lentement vers la ville animée de New York avec ses grands immeubles, son trafic intense et ses gens.

 1913-1915 Tokyo : prospérité stable après la restauration Meiji 

Ces images originales ont été prises par des photographes étrangers à Tokyo, au Japon, entre 1913 et 1915, juste au moment où la Première Guerre mondiale (1914-1918) était sur le point de commencer.

À cette époque, le Japon traversait une période de prospérité après des décennies de développement stable suite à la restauration Meiji.La population de Tokyo est revenue à son pic d'avant la restauration Meiji, soit plus de 2 millions de personnes.

Commentaire d'un internaute : À cette époque, les gens regardaient la caméra,Comme si c'était une sonde extraterrestre

Les professeurs japonais en costume et les passants en haut-de-forme dans les rues reflètent tous le fait que le Japon de cette époque traversait une période de transformation, celle de la fusion des cultures occidentale et orientale.

Si vous n'êtes toujours pas satisfait, vous pouvez vous rendre sur la page d'accueil YouTube de Denis pour continuer votre voyage dans le temps :

https://www.youtube.com/c/DenisShiryaev/videos

Denis Shiryaev a humblement déclaré que ces résultats ont été obtenus grâce aux technologies d'IA telles que DAIN, ESRGAN et DeOldify. Avec ces techniques, tout le monde peut le faire.

Routine en trois étapes pour la restauration d'anciennes vidéos : améliorer la qualité de l'image, insérer des images et coloriser

  Gigapixel AI : un outil puissant pour améliorer la qualité de l'image

Selon Denis,Il a d'abord utilisé Gigapixel AI, un logiciel commercial de retouche d'image développé par Topaz Labs, pour mettre à l'échelle la vidéo originale à très basse résolution de 600% à une qualité 4K.

Gigapixel AI fonctionne de manière similaire à ESRGAN, une technique de restauration de super-résolution, en utilisant son algorithme d'interpolation propriétaire pour analyser les images et identifier les détails et les structures pour « compléter » davantage l'image.

Pour éviter le flou des images agrandies, le logiciel utilise une technologie de réseau neuronal convolutif profond pour analyser des millions de paires d'images afin de comprendre comment les détails sont perdus dans les images, puis de compléter les détails dans les nouvelles images.

Le logiciel prend déjà en charge la mise à l'échelle sans perte des formats vidéo courants

  Modèle de remplissage de cadre : DAIN

Ensuite, Denis a utilisé le modèle d'interpolation d'images vidéo sensible à la profondeur DAIN pour créer et insérer des images qui n'existaient pas auparavant dans la vidéo entre les images clés des clips vidéo existants, en s'appuyant sur « l'imagination » du modèle pour augmenter la fréquence d'images de la vidéo à 60 images par seconde.

DAIN (Depth-Aware Video Frame Interpolation) est un algorithme d'interpolation d'images développé par Bao Wenbo, doctorant à l'Université Jiao Tong de Shanghai.L'algorithme peut « imaginairement » convertir une vidéo de 30 images en 480 images, rendant la vidéo plus fluide.

Adresse du projet : https://github.com/baowenbo/DAIN

Comparaison de l'effet de l'ajout d'images d'une vidéo à 30 ips à une vidéo à 60 ips

  Coloriage : DeOldify

Pour le processus de coloration, l'auteur a utilisé DeOldify, une technologie développée dans le but de colorier de vieilles photos. Le principe est d'utiliser la technologie NoGAN, qui combine les avantages de la formation GAN, tels que d'excellents effets de coloration, tout en éliminant certains effets secondaires, tels que la coloration instable et vacillante.

Exemple de colorisation fourni par l'auteur du projet, la photo originale a été prise à la fin des années 1890

Adresse du projet : https://github.com/jantic/DeOldify

Enfin, pour certaines premières vidéos muettes, Denis a également ajouté quelques effets sonores correspondant aux vidéos pour rendre l'effet audiovisuel global plus réaliste.

Denis a déclaré qu'il aimait le domaine de la technologie de l'apprentissage automatique et que la restauration d'anciennes vidéos n'était qu'une démonstration de son application de cette technologie. Il continuera à rechercher de telles technologies sur GitHub et continuera à partager ses résultats d'apprentissage sur son blog.

Denis, né en 1988, publie souvent des photos de voyage sur Instagram,Il semble que ce soit un petit frère qui aime la technologie et la vie.

-- sur--