LivePortrait는 단 1개의 원본 이미지로 역동적인 비디오를 생성할 수 있습니다.

튜토리얼 소개

이 튜토리얼은 LivePortrait 최신 버전을 한 번의 클릭으로 실행하는 데모입니다. 관련 환경과 종속성이 설치되었습니다. 한 번의 클릭으로 복제하고 시작하여 체험해 볼 수 있습니다.

LivePortrait는 Kuaishou Keling Big Model Team에 의해 오픈 소스로 공개되었습니다. 주요 기능으로는 단일 이미지에서 생생한 애니메이션을 생성하고, 눈과 입술의 움직임을 정밀하게 제어하고, 여러 인물 사진의 원활한 스티칭을 처리하고, 다양한 스타일의 인물 사진을 지원하고, 고해상도 애니메이션을 생성하는 것 등이 있습니다. 이 프로젝트는 암묵적 키포인트 프레임워크를 기반으로 하는 AI 인물 사진 애니메이션 생성 프레임워크를 사용합니다. 영상 속 표정과 자세를 정적 또는 동적 인물 사진으로 전환하여 매우 표현력이 풍부한 영상을 제작할 수 있습니다.

최신 버전에서는 이 모델에 정밀한 인물 사진 편집, 비디오 편집 등 여러 흥미로운 기능이 추가되었습니다.

실행 방법

1. 컨테이너를 복제하고 시작한 후 생성된 API 주소를 브라우저에 복사하여 Gradio 인터페이스 추론 환경을 시작합니다.

2. 링크를 열면 아래 인터페이스가 보입니다. 각각 사진과 비디오를 업로드하고, 애니메이션을 클릭한 후 잠시 기다리면 비디오 결과가 생성됩니다.

• 이미지 자료: 고해상도의 정면 사진을 업로드하세요. 사진이 선명하고 빛이 고르게 분포되어 있는지 확인하고, 과도한 노출이나 짙은 그림자가 생기지 않도록 하세요.
• 참고 영상: 인물의 표정과 머리 움직임을 표현하는 참고 영상을 업로드하세요. 영상 속 캐릭터는 대화를 나누고, 노래를 부르고, 다양한 표정을 지을 수 있습니다.

"애니메이션 옵션"에서 상대 동작, 자르기, 다시 붙여넣기 등 3가지 옵션을 활성화할지 선택할 수 있습니다.

새로운 버전에서는 영상 속 표정이나 움직임에 더 집중할 수 있을 뿐만 아니라, 움직임의 부드러움과 같은 매개변수도 조정할 수 있습니다.

다음은 몇 가지 예입니다.

3. 인물 영상 편집 모드

새로운 버전의 아래 인터페이스에서는 세로 비디오 편집 모드로 들어갈지 여부와 비디오에 해당 변경 사항을 적용할지 여부를 선택할 수도 있습니다.

4. 정밀한 인물 사진 편집 모드

인터페이스의 다음 섹션은 정밀한 인물 사진 편집 모드입니다. 사용자는 눈썹, 입 크기, 윙크, 미소의 정도 등의 매개변수를 변경하여 새로운 사진을 생성할 수 있습니다. 얼굴의 위치도 이동할 수 있습니다.

효과는 그림과 같습니다.

5. 리타겟팅 비디오 모드

데모 인터페이스 하단에서는 리타겟팅 비디오 모드를 체험할 수 있습니다. 이 모드를 사용하면 영상 속 인물의 입 크기를 조절할 수 있습니다. 타겟 입술 열림 비율을 0으로 조정하면 새로 생성된 영상 속 캐릭터의 입이 닫혀 있는 것을 확인할 수 있습니다.

교류 및 토론

🖌️ 고품질 프로젝트를 발견하시면, 백그라운드에 메시지를 남겨 추천해주세요! 또한, 튜토리얼 교환 그룹도 만들었습니다. 친구들의 QR코드 스캔과 [SD 튜토리얼] 댓글을 통해 그룹에 가입하여 다양한 기술 이슈에 대해 논의하고 신청 결과를 공유해 주시기 바랍니다.↓