"삼체 문제" 애니메이션 버전의 제작이 시작되었습니다. 정말 2021년에 출시될까요?

최근 빌리빌리에서 애니메이션 '삼체'의 공식 예고편이 공개되면서 최종 영화는 2021년에 개봉될 예정이라고 알렸습니다. 3분 분량의 짧은 영상은 수백만 명의 사람들의 관심을 끌었습니다. 이번에는 '삼체 문제'를 보려면 얼마나 기다려야 할까?

이번 주, 빌리빌리에서 '삼체' 애니메이션 버전의 첫 공식 PV(프로모션 영상)가 공개되었습니다. 영상이 공개되자마자 엄청난 인기를 얻었고, 클릭 수도 엄청나게 늘었습니다. 현재 이 영상은 빌리빌리에서 거의 1,000만 번 재생되었습니다.

애니메이션 '쓰리 바디' 첫 공식 PV 공개

엄청난 인기를 얻은 '삼체문제'는 영화나 드라마로 각색하기 어려운 작품이다.

소설 "삼체 문제"는 2006년 "사이언스 픽션 월드"에 처음 연재되었습니다. 훌륭한 스토리, 고상한 아이디어, 웅장한 주제 덕분에 이 작품은 금세 수천 명의 독자가 찾는 SF 걸작이 되었습니다.

그 이후로 이 3부작은 단권으로 출간되어 국내외에서 모두 높은 판매고를 기록했습니다. 심지어 주커버그와 오바마도 이를 극찬했습니다. 2015년에는 공상과학계 최고 상인 휴고상을 수상하였고, 현대 중국에서 가장 영향력 있는 소설 중 하나가 되었습니다.

하지만 '삼체'가 영화로 만들어지는 길은 매우 험난해 보인다. 영화 '삼체'의 촬영은 2015년에 시작됐지만, 아직 개봉 소식은 없습니다.

스토리의 복잡성, 하드코어 공상과학 요소, 그리고 매우 풍부한 상상력이 담긴 장면은 모두 엄청난 도전이었습니다. 

영화판으로는 획기적 발전을 이루지 못하는 상황에서, 애니메이션으로 만들면 많은 제약을 피할 수 있을지도 모릅니다. 애니메이션 자체가 상상력에 의존하기 때문에 자유롭고 상상력 넘치는 방식으로 활용될 수 있으며, 그림이나 시각적 표현에 실질적인 제한이 거의 없습니다. 

아마도 이러한 이유 때문에 빌리빌리는 삼체 우주와 이화 카이티안과 힘을 합쳐 "삼체 문제"의 애니메이션 버전을 공동으로 제작하게 되었을 것입니다. 

왜 애니메이션을 만드는 게 이렇게 어려울까?

최근 몇 년 동안 최고의 애니메이션 작품이 나오기까지 오랜 시간이 걸렸습니다.

국내 애니메이션을 활성화시킨 '몽키킹: 영웅의 귀환'.8년이 걸려서 완성했습니다, 마침내 만족스러운 답변을 내놓았고, 흥행수익 9억 5,600만 달러를 벌어들였다.

나타: 악마아이가 세상에 나오다를 제작하는 데 5년이 걸렸고 1,600명 이상의 사람들이 참여했습니다., 흥행 수입은 49억 달러를 기록하며 중국 영화 역사상 두 번째로 높은 수익을 올린 영화가 되었습니다.

고품질 애니메이션은 규모가 크고 힘든 프로젝트입니다. 캐릭터 생성, 스토리보드 애니메이션, 특수 효과 제작 등이 많이 필요합니다.10초 남짓한 짧은 영상이라도 여러 팀이 수개월 동안 노력해야 할 수 있습니다.

다행히도 AI 기술의 발전으로 애니메이션 제작에 도움이 되고 있습니다. 어쩌면 새로운 AI 기술이 더 완벽한 "삼체" 애니메이션을 만드는 데 더 효율적인 방법이나 아이디어를 제공하는 데 도움이 될 수도 있습니다. 

애니메이션 속도 향상을 위한 블랙 테크놀로지: 그림이 스스로 움직이게 만들기

숙련된 애니메이터라면 인물의 이미지에 맞는 캐릭터 구성을 완성하는 것은 어렵지 않지만, 필요에 따라 움직이게 하려면 많은 추가 작업이 필요할 수 있습니다.

예를 들어, 2D 애니메이션에서 여러 개의 모션 샷을 그리는 것, 또는 3D 애니메이션에서 모션 캡처 기술을 사용하는 것입니다. 하지만 이제 AI는 자동으로 사진을 '깨워' 움직이게 할 수 있습니다.

워싱턴 대학과 Facebook의 연구자들은 얼마 전 AI를 사용하여 정적 이미지나 그림 속의 캐릭터나 인물을 3D 애니메이션으로 변환하는 연구를 발표했습니다.

이 기술은 PyTorch 프레임워크 기반으로 개발된 딥러닝 모델입니다. 이 소프트웨어는 이미지에서 사람을 분할한 다음 3D 메시를 오버레이하여 애니메이션을 적용해 사진이나 그림에 생동감을 불어넣습니다.

기성 알고리즘을 사용하여 이미지에서 사람 감지, 2D 포즈 추정 및 사람 분할을 수행합니다. 그런 다음 SMPL(Skinned Multi-Person Linear Model, 3D 캐릭터 모델) 템플릿 모델을 2D 포즈에 맞춰서 법선 맵과 스킨 맵으로 이미지에 투영합니다.

이 단계의 핵심은 사람의 실루엣과 SMPL 실루엣 간의 매핑을 찾고, SMPL 노멀/스킨 맵을 출력에 전달하고, 움직이는 노멀 맵을 통합하여 깊이 맵을 구축하는 것입니다.

모델의 뒷면을 시뮬레이션하려면 이 과정을 반복하고 깊이 맵과 스킨 맵을 결합하여 완전히 조작된 3D 메시를 만듭니다. 복원된 배경에서 모션 캡처 시퀀스를 사용하여 메시에 추가적인 텍스처를 적용하고 애니메이션을 적용했습니다.

즉, 캐릭터의 전신 정면 이미지만 있으면 이 기술을 사용하여 움직이는 장면을 얻을 수 있습니다. 이는 사진으로부터 캐릭터를 모델링하는 기술적 가능성을 탐구하는 동시에, 단일 이미지로부터 가상 이미지를 생성하는 경로를 재구성합니다. 

애니메이션 속도 향상을 위한 블랙 테크놀로지: 텍스트를 자동으로 애니메이션으로 변환

각색 작품의 경우, 원작에 완벽하게 충실하면서도 작업을 최대한 간소화하고 싶다면 텍스트를 이용해 직접 애니메이션을 생성하는 것이 가장 이상적인 방법일 수 있습니다. 이 시점에서 AI 기술은 끊임없이 개선되고 있습니다. 

2018년 일리노이 대학과 앨런 인공지능 연구소의 연구진은 CRAFT(Composition, Retrieval, and Fusion Network)라는 AI 모델을 개발했습니다. 이 모델은 텍스트 설명(또는 제목)을 기반으로 플린트스톤 영상에서 해당 애니메이션 장면을 생성할 수 있습니다.

최종 AI 모델은 25,000개 이상의 비디오 클립을 통해 훈련되었습니다. 영상 속 각 영상은 길이가 3초이고, 프레임 수는 75개이며, 장면 속 등장인물과 장면의 내용이 라벨과 주석으로 표시되어 있습니다. 

AI 모델은 비디오와 텍스트 설명을 일치시키는 방법을 학습하고 일련의 매개변수를 설정합니다. 궁극적으로, 제공된 텍스트 설명은 비디오에서 배운 캐릭터, 소품, 장면 위치 등을 포함하여 애니메이션 시리즈의 팬이 만든 파생물로 변환될 수 있습니다.

만약 이것이 단순한 편집과 이어붙이기라면, 오늘날의 AI는 훨씬 더 많은 것을 할 수 있습니다.

올해 4월, 디즈니와 러트거스 대학의 과학자들은 AI 모델에 996개의 스크립트를 입력하고 최종적으로 AI가 텍스트 설명을 기반으로 애니메이션을 자동으로 생성하도록 훈련시키는 논문을 발표했습니다.

AI가 텍스트로부터 비디오를 생성하려면 먼저 텍스트를 "이해"한 다음 해당 애니메이션을 생성해야 합니다. 이를 위해 그들은 여러 모듈형 구성 요소가 있는 신경망을 사용했습니다.

이 모델은 세 부분으로 구성되어 있습니다. 첫 번째는 스크립트 텍스트의 장면을 자동으로 구문 분석하는 스크립트 구문 분석 모듈입니다. 두 번째는 주요 설명 문장을 추출하고 동작 표현을 개선할 수 있는 자연어 처리 모듈입니다. 마지막은 동작 지침을 애니메이션 시퀀스로 변환하는 생성 모듈입니다.

연구자들은 무료로 제공되는 영화 대본에서 장면 설명을 수집하고 정리하여 코퍼스를 편찬했습니다. 이 설명은 1,402,864개의 문장을 포함하는 525,708개의 설명으로 구성되어 있으며, 그 중 920,817개에는 최소한 하나 이상의 동작이 포함되어 있습니다.

설명 언어와 비디오 간의 매핑이 설정되면 스크립트를 입력하여 간단한 애니메이션 클립을 생성할 수 있습니다. 테스트 실험에서 생성된 애니메이션의 합리성은 68%입니다.

기술이 더 성숙해졌다면 적응 과정에서 발생할 수 있는 정보 편차는 더 이상 존재하지 않을 것입니다. 

2021년 애니메이션 "삼체 문제"가 여러분을 기다리고 있습니다

이러한 기술이 "삼체 문제" 애니메이션 제작에 사용되기까지는 아직 시간이 걸리겠지만, 이러한 새로운 아이디어는 애니메이션 제작에 새로운 아이디어를 가져올 것입니다.

현재 관점에서 볼 때, 충분한 데이터와 훈련만 있다면 AI 모델이 애니메이션을 생성하는 법을 배우는 날도 멀지 않을 것입니다. 

"삼체" 애니메이션으로 돌아와서, 삼체 우주와 이화 카이티안의 강력한 제작진, 그리고 빌리빌리의 강력한 지원에 힘입어, 이 애니메이션에는 많은 칩이 추가되었습니다.

2021년, 비가 오든 눈이 오든, 우리는 여러분을 기다릴 것입니다!

-- 위에--