AI가 중화민국 시절 베이징 거리 풍경 영상을 복원해 인터넷에 퍼지며 과거로 데려간다
웨이보 블로거 @大谷Spitzer가 5월 8일에 영상을 업로드했는데, 이 영상은 인터넷 전반에 걸쳐 엄청난 반향을 일으켰습니다. 그는 캐나다 사진작가가 1920년에서 1929년 사이에 촬영한 중화민국 시대의 베이징 거리 풍경을 담은 흑백 영상을 AI를 사용하여 채색하고 프레임 속도를 복원하고 초고해상도로 구현하여 네티즌들이 100년 전으로 돌아가 과거의 번영을 경험할 수 있도록 했습니다.
웨이보 블로거 @大谷Spitzer가 5월 8일에 영상을 업로드했는데, 이 영상은 인터넷 전반에 걸쳐 엄청난 반향을 일으켰습니다.
그는 캐나다 사진작가가 1920년에서 1929년 사이에 촬영한 중화민국 시대의 베이징 거리를 담은 흑백 영상에 AI를 사용하여 색상을 입히고 프레임 속도를 복원하고 초고해상도를 구현했습니다. 이를 통해 네티즌들은 100년 전으로 여행하여 과거의 번영을 경험할 수 있었습니다.
중화민국으로의 여행: AI가 100년 전 베이징 거리 풍경을 복원하다
원본 영상은 4년 전 인민일보에서 공개한 보관 영상에서 나온 것으로, 캐나다 사진작가가 1920년에서 1929년 사이에 찍은 것으로, 정확히 100년 전의 영상입니다.
원본 영상은 현재 캐나다 국립영화위원회에서 보관하고 있습니다.
그레고리력으로 1920년은 중화민국의 9년째 되는 해로, 중화민국 북양 정부의 연호였다.
이 시기에 중국은 또한 '21개조 요구 철폐', '쑨원의 죽음', '돤치루이의 임시정부 수립 선포' 등 일련의 중요한 역사적 사건을 경험했습니다.
1차 세계대전이 끝난 후 중국은 잠시 휴식을 취했고, 바로 이 기간 동안 중국의 초기 산업은 좋은 성장 기회를 얻었습니다.
90년대에 태어난 독립 게임 개발자 @Otani Spitzer
이 프로젝트의 저자는 1990년대에 태어난 독립 게임 개발자인 후웬구입니다. 그는 베이징에서 태어나 중국 인민대학 미술학과에서 학사 학위를 받았고, 뉴욕 시각예술대학에서 석사 학위를 받았습니다. 그는 현재 뉴욕에서 독립 게임 개발에 참여하고 있습니다.
후원구(Weibo: @大谷Spitzer) 그는 예술가, 음악가, 프로그래머, 게임 디자이너로서 10년 이상 게임 개발과 음악 분야에 종사해 왔습니다.
대표작으로는 '코믹콘 시뮬레이터', '에디 바이올렛' 등이 있다. '에디 바이올렛'은 그의 50여 개 게임 작품 중 하나로, 중국에서 10만 번 다운로드되었다.
포트폴리오: http://dgspitzer.my-style.in/gameportfolio/
이 영상에서는 AI를 사용하여 채색, 프레임 속도 복원 및 초고해상도 부분을 완성합니다.
효과음은 인터넷에서 가져왔고, 배경음악은 베이징 민속음악의 거장들이 작곡했습니다. 도교 음악은 베이징 백룡사의 녹음과 비디오에서 나왔습니다. 기술 파이프라인은 Denis Shiryae의 이미지 복원 튜토리얼을 기반으로 합니다.
저자는 프레임 속도 복구 부분에서 DAIN 보간 알고리즘을 사용했는데, 이는 상하이 교통대학의 박사인 바오 웬보가 오픈 소스로 공개한 것입니다. (프로젝트 주소: https://github.com/baowenbo/DAIN)
두 시점에 입력 프레임이 주어지면 먼저 광학 흐름과 깊이 맵을 추정한 다음, 제안된 깊이 인식 흐름 투영 계층을 사용하여 중간 흐름을 생성합니다.
해상도 향상부분적으로 사용됨 에스르간GAN 기반의 향상된 초고해상도 방식입니다.
비디오 컬러링부분적으로 사용됨 디올디파이 , 오래된 이미지와 비디오에 색칠하고 복원하는 딥러닝 프로젝트입니다. 캘리포니아의 아티스트 엔지니어가 Github에 오픈 소스로 공개 (프로젝트 주소: https://github.com/jantic/DeOldify)
DeOldify는 새로운 효율적인 이미지-투-이미지 GAN 학습 방법인 NoGAN을 사용합니다. 세부 사항이 더 잘 처리되었고 렌더링이 더 현실적입니다.
또한 VirtualDub 소프트웨어를 사용하여 오래된 영화의 노이즈를 줄이기 위해 비디오를 처리했습니다.
마지막으로, 이 10분짜리 영상은 오픈소스 알고리즘과 소프트웨어의 완벽한 조합을 통해 우리에게 공개되었으며, 네티즌들은 중화민국으로 여행을 떠나 베이징의 번화한 거리 풍경을 경험하게 되었습니다.
-- 위에--