온라인 튜토리얼 | 청도 소년 교은군의 영혼이 흑색 신화: 원숭이 왕으로 여행을 떠난다? MuseV + MuseTalk로 고품질 디지털 휴먼을 만들어 보세요
기존의 디지털 휴먼 훈련 프로그램을 사용하여 고품질의 디지털 휴먼을 생성하려면 많은 시간과 컴퓨팅 리소스가 필요하며, 훈련 자료에 대한 요구 사항도 높습니다. 좋은 입술 모양 일관성 효과를 얻으려면 보통 몇 시간, 심지어 그 이상이 걸립니다.
MuseV와 MuseTalk의 등장은 디지털 인간 분야에 새로운 획기적인 진전을 가져왔습니다. MuseV를 사용하여 디지털 인간 비디오를 생성한 후, MuseTalk를 사용하여 입술 움직임과 오디오를 동기화하면 단 몇 분 만에 완전한 디지털 인간 제작이 가능합니다.
"MuseV 무제한 지속시간 가상 인간 비디오 생성 데모"와 "MuseTalk 고품질 립싱크 모델 데모"가 OpenBayes의 공개 튜토리얼 모듈에 업로드되었습니다.당신을 위한 환경이 이미 만들어졌습니다. 어떤 명령도 입력할 필요가 없습니다. 한 번의 클릭으로 복제하여 바로 시작할 수 있습니다!
튜토리얼 주소:
* 뮤즈V:
* 뮤즈톡:
더 잘 이해하실 수 있도록 도와드리기 위해,B 스테이션 업마스터 "나오나오 부나오 노우스몬"이 자세한 강의 영상을 녹화했습니다. 모두 3번 클릭해주세요~
https://www.bilibili.com/video/BV1fCWVeWEic/?vd_source=5e54209e1f8c68b7f1dc3df8aabf856c
최근 인기를 끈 '흑신화: 오공'을 이미 많은 독자분들이 경험하셨을 것이라 생각합니다. 얼랑 션은 정말 사람들이 좋아하기도 하고 싫어하기도 하는 인물입니다. 많은 선수들이 그의 얼굴이 잘생기지 않았다고 불평했고, 그래서 그들은 그를 "국민 양견" 교은군으로 교체했습니다.
데모 실행
MuseV를 사용하여 가상 인간 비디오 생성
1. hyper.ai에 로그인하고 "튜토리얼" 페이지에서 "MuseV Unlimited Duration Virtual Human Video Generation Demo"를 검색한 후 "이 튜토리얼을 온라인으로 실행"을 클릭합니다.
2. 페이지가 이동한 후 오른쪽 상단의 "복제"를 클릭하여 튜토리얼을 자신의 컨테이너로 복제합니다.
3. 오른쪽 하단에 있는 "다음: 해시레이트 선택"을 클릭합니다.
4. 페이지가 이동한 후 "NVIDIA RTX 4090"과 "PyTorch" 이미지를 선택하고 "다음: 검토"를 클릭합니다.신규 사용자는 아래 초대 링크를 사용하여 등록하고 RTX 4090 4시간 + CPU 자유 시간 5시간을 받으세요!
HyperAI 독점 초대 링크(복사하여 브라우저에서 열기):https://openbayes.com/console/signup?r=6bJ0ljLFsFh_Vvej
5. 확인 후 "계속"을 클릭하고 리소스가 할당될 때까지 기다리세요. 첫 번째 복제 과정은 약 2분 정도 걸립니다. 상태가 "실행 중"으로 변경되면 "API 주소" 옆에 있는 점프 화살표를 클릭하여 데모 페이지로 이동합니다.API 주소 접근 기능을 이용하기 위해서는 이용자는 실명인증을 완료해야 합니다.
API 주소를 열었을 때 "잘못된 게이트웨이"가 표시되면 모델이 아직 로드되지 않았음을 의미합니다. 1~2분 정도 기다린 후 API 주소를 다시 열어보세요.
6. 데모를 연 후 사진을 업로드하고 프롬프트를 입력합니다. 프롬프트의 형식은 품질 단어 + 등장인물 주어 + 동사입니다. 예를 들어 (걸작, 최고 품질, 고해상도: 1), (1소년, 솔로: 1), (눈 깜박임: 1.6), (헤어 웨이브: 1.3)입니다. 입력 후 "생성"을 클릭하고 잠시 기다리면 영상이 생성됩니다.
MuseTalk를 이용한 립싱크와 오디오
1. 튜토리얼 인터페이스로 돌아가서 MuseTalk 고품질 립싱크 모델 데모를 열고 이 튜토리얼을 온라인으로 실행을 클릭합니다.
2. 페이지가 이동한 후 오른쪽 상단의 "복제"를 클릭하여 튜토리얼을 자신의 컨테이너로 복제합니다.
3. 오른쪽 하단에 있는 "다음: 해시레이트 선택"을 클릭합니다.
4. 페이지가 이동한 후에도 여전히 "NVIDIA RTX 4090"과 "PyTorch" 이미지를 선택하고 "다음: 검토"를 클릭합니다.
5. 확인 후 "계속"을 클릭하고 리소스가 할당될 때까지 기다리세요. 첫 번째 복제에는 약 2분이 걸립니다. 상태가 "실행 중"으로 표시되면 "API 주소" 옆에 있는 점프 화살표를 클릭하여 데모를 엽니다.
6. MuseTalk 데모 페이지에 들어가서 방금 만든 비디오를 업로드한 다음 오디오 클립을 업로드하고 "생성"을 클릭하고 잠시 기다리면 새로 생성된 비디오의 캐릭터 입술 모양이 오디오와 일치하는 것을 확인할 수 있습니다.
우리는 "안정 확산 튜토리얼 교환 그룹"을 만들었습니다. 다양한 기술적인 문제를 논의하고 신청 결과를 공유하기 위해 그룹에 가입해 주세요~