HyperAI

KI Stellt Ein Video Einer Straßenszene in Peking Aus Der Republik China Wieder Her, Das Im Internet Viral Geht Und Sie in Die Vergangenheit Zurückversetzt

特色图像

Der Weibo-Blogger @大谷Spitzer lud am 8. Mai ein Video hoch, das im gesamten Internet eine Welle von Reposts auslöste. Er verwendete KI, um ein Schwarzweißvideo von Straßenszenen in Peking während der Zeit der Republik China, das zwischen 1920 und 1929 von einem kanadischen Fotografen aufgenommen wurde, zu kolorieren, die Bildrate wiederherzustellen und eine Superauflösung zu erzielen. So konnten Internetnutzer hundert Jahre zurückreisen und den Wohlstand der Vergangenheit erleben.

Der Weibo-Blogger @大谷Spitzer lud am 8. Mai ein Video hoch, das im gesamten Internet eine Welle von Reposts auslöste.

Er verwendete KI, um ein Schwarzweißvideo der Straßen Pekings während der Herrschaft der Republik China zu kolorieren, die Bildrate wiederherzustellen und eine Superauflösung zu erreichen. Das Video wurde zwischen 1920 und 1929 von einem kanadischen Fotografen aufgenommen und ermöglichte es den Internetnutzern, hundert Jahre in die Vergangenheit zu reisen und den Wohlstand der Vergangenheit nachzuerleben.

  Reise zurück in die Republik China: KI stellt Pekinger Straßenszenen vor hundert Jahren wieder her

Das Originalvideo stammt aus Archivmaterial, das vor vier Jahren von der People's Daily veröffentlicht wurde und von einem kanadischen Fotografen zwischen 1920 und 1929, also vor genau einhundert Jahren, aufgenommen wurde.

Das Originalmaterial wird derzeit vom National Film Board of Canada aufbewahrt.

Das Jahr 1920 war im Gregorianischen Kalender das neunte Jahr der Republik China und damit die Ära der Beiyang-Regierung der Republik China.

In dieser Zeit kam es in China auch zu einer Reihe wichtiger historischer Ereignisse, darunter die „Abschaffung der Bewegung der 21 Forderungen“, der „Tod von Sun Yat-sen“ und die „Ankündigung der Einsetzung einer provisorischen Regierung durch Duan Qirui“.

Screenshot: Pekinger begrüßen sich

Am Ende des Ersten Weltkriegs kam es für China zu einer kurzen Atempause und in diesen Jahren boten sich den jungen Industrien des Landes gute Wachstumschancen.

Ein unabhängiger Spieleentwickler, geboren in den 90er Jahren @Otani Spitzer

Der Autor dieses Projekts ist Hu Wengu, ein unabhängiger Spieleentwickler, der in den 1990er Jahren geboren wurde. Er wurde in Peking geboren und schloss sein Studium an der Kunstfakultät der Renmin University of China mit einem Bachelor und an der School of Visual Arts in New York mit einem Master ab. Derzeit ist er in New York als unabhängiger Spieleentwickler tätig.

Hu Wengu (Weibo: @大谷Spitzer) Als Künstler, Musiker, Programmierer und Spieledesigner beschäftigt er sich seit mehr als 10 Jahren mit Spieleentwicklung und Musik.

Repräsentative Werke: „Comic Con Simulator“ und „Eddy Violet“ usw. Eddy Violet ist eines seiner über 50 Spielewerke und wurde in China 100.000 Mal heruntergeladen.

Portfolio: http://dgspitzer.my-style.in/gameportfolio/

In diesem Video wird KI zur Vervollständigung der Farbgebung, der Bildratenwiederherstellung und der Superauflösungsteile verwendet.

Die Soundeffekte stammen aus dem Internet und die Hintergrundmusik wurde von Meistern der Pekinger Volksmusik komponiert. Die taoistische Musik stammt von Aufnahmen und Videos des Pekinger Bailong-Tempels. Die technische Pipeline basiert auf dem Tutorial zur Bildrestaurierung von Denis Shiryae.

Video-Screenshot: Vorher-Nachher-Vergleich der vom Autor vorgeschlagenen Restaurierung

Der Autor verwendet im Teil zur Bildratenreparatur den DAIN-Interpolationsalgorithmus, der von Bao Wenbo, einem Arzt der Shanghai Jiaotong University, als Open Source bereitgestellt wird. (Projektadresse: https://github.com/baowenbo/DAIN)

DAIN-Architekturdiagramm

Anhand der Eingabebilder zu zwei Zeitpunkten werden zunächst der optische Fluss und die Tiefenkarte geschätzt und anschließend mithilfe der vorgeschlagenen tiefenbewussten Flussprojektionsschicht der Zwischenfluss generiert.

Verbesserung der AuflösungTeilweise verwendet ESRGAN,Eine GAN-basierte Methode zur verbesserten Superauflösung.

VideofärbungTeilweise verwendet DeOldify , ein Deep-Learning-Projekt zum Kolorieren und Restaurieren alter Bilder und Videos. Open Source auf Github von einem Künstler-Ingenieur in Kalifornien (Projektadresse: https://github.com/jantic/DeOldify)

DeOldify verwendet NoGAN, eine neue und effiziente Bild-zu-Bild-GAN-Trainingsmethode. Die Details werden besser verarbeitet und die Darstellung ist realistischer.

Ich habe außerdem die Software VirtualDub zur Videoverarbeitung verwendet, um das Rauschen alter Filme zu reduzieren.

Schließlich wurde uns dieses zehnminütige Video durch die perfekte Kombination aus Open-Source-Algorithmen und -Software präsentiert und veranlasste die Internetnutzer, in die Republik China zurückzukehren und das geschäftige Straßenleben Pekings zu erleben.

-- über--