Nvidia 오픈소스화한 AI 음성 애니메이션 기술, 개발자들 대상으로 3D 아바타 생생하게 구현 가능

Nvidia는 AI 기반 음성 애니메이션 기술인 Audio2Face를 오픈소스로 공개했다. 이 도구는 음성 입력만으로 3D 아바타의 현실적인 얼굴 표정과 입모양을 자동 생성한다. 개발자들은 음성의 음성 특징을 분석해 3D 캐릭터의 표정과 입동작을 정교하게 연출할 수 있으며, 사전 녹음 콘텐츠나 라이브스트리밍 등 다양한 상황에 활용 가능하다. 이미 ‘체르노빌라이트 2: 엑클루전 존’ 개발사인 파름51과 ‘에일리언: 루거 인크루전 에볼브드 에디션’ 팀이 이 기술을 게임에 적용한 바 있다. Nvidia는 모델과 개발자 키트뿐 아니라 학습 프레임워크까지 공개해 사용자가 자신만의 목적에 맞게 모델을 조정할 수 있도록 했다. 이로써 게임, 애플리케이션, 메타버스 등 다양한 분야에서 고도화된 3D 캐릭터 제작이 가능해졌다.