온라인 튜토리얼: ByteDance가 InfiniteYou 이미지 생성 프레임워크를 오픈 소스화하여 고정밀 얼굴 특징 마이그레이션을 달성했습니다.
InfiniteYou(약칭 InfU)는 ByteDance Intelligent Creation이 최근 출시한 Diffusion Transformers를 기반으로 한 신원 보존 이미지 생성 프레임워크입니다.이 기술은 이미지를 생성하는 동안 개인의 신원 일관성을 유지하기 위해 첨단 기술을 사용합니다. 즉, 다양한 장면의 사진을 생성할 때 얼굴 특징을 정확하게 유지할 수 있습니다..
이 분야에서 Diffused Transformers(DiTs)를 활용한 가장 초기 프레임워크 중 하나인 InfU는 기존 방법의 세 가지 핵심 문제, 즉 동일성 유사성 부족, 이미지-텍스트 정렬 편향, 생성 품질 및 미적 성능 저하를 체계적으로 해결합니다. 핵심 혁신 기술인 InfuseNet은 잔여 연결을 통해 DiT 기반 모델에 ID 기능을 주입하여 생성 기능을 유지하면서도 ID 충실도를 크게 향상시킵니다. 사전 학습과 합성된 단일-개인 다중 샘플(SPMS) 데이터를 이용한 지도 미세 조정(SFT)을 포함하는 다단계 학습 전략을 채택하여 이미지-텍스트 정렬을 더욱 최적화하고, 생성 품질을 개선하며, 얼굴 중복 효과를 효과적으로 완화합니다.광범위한 실험 결과, InfU는 SOTA 수준의 성능을 달성하여 모든 측면에서 기존 기준 방법을 능가하는 것으로 나타났습니다..
현재, HyperAI 공식 웹사이트 튜토리얼 섹션에서 "InfiniteYou 고화질 이미지 생성 데모" 튜토리얼이 출시되었습니다.관심이 있으시다면, 직접 와서 시도해 보세요!
튜토리얼 주소:
데모 실행
1. hyper.ai에 로그인하고, 튜토리얼 페이지에서 InfiniteYou 고화질 이미지 생성 데모를 선택하고, 이 튜토리얼을 온라인으로 실행을 클릭합니다.
2. 페이지가 이동한 후 오른쪽 상단의 "복제"를 클릭하여 튜토리얼을 자신의 컨테이너로 복제합니다.
3. "NVIDIA RTX A6000"과 "PyTorch" 이미지를 선택하세요. OpenBayes 플랫폼은 4가지 청구 방법을 제공합니다. 귀하의 요구 사항에 따라 "사용 후 결제" 또는 "일일/주간/월간"을 선택할 수 있습니다. "계속"을 클릭하세요.신규 사용자는 아래 초대 링크를 사용하여 등록하고 RTX 4090 4시간 + CPU 자유 시간 5시간을 받으세요!
HyperAI 독점 초대 링크(복사하여 브라우저에서 열기):
https://openbayes.com/console/signup?r=Ada0322_NR0n
4. 리소스가 할당될 때까지 기다리세요. 첫 번째 클로닝 과정은 약 2분이 걸립니다. 상태가 "실행 중"으로 변경되면 "API 주소" 옆에 있는 점프 화살표를 클릭하여 데모 페이지로 이동합니다. API 주소 접근 기능을 이용하기 위해서는 이용자는 실명인증을 완료해야 합니다.
효과 표시
1. 데모 페이지에 접속 후, 먼저 "아이덴티티 이미지"에 얼굴이 포함된 사진을 업로드하고, 프롬프트를 입력하여 "모델 버전"에서 모델 버전을 선택하세요. 여기에서는 더 나은 이미지와 텍스트 정렬 및 생성 효과를 얻기 위해 기본적으로 "aes_stage2"가 사용됩니다. 더 높은 ID 유사성이 필요하면 "sim_stage1"을 시도해 보세요. "컨트롤 이미지[선택 사항]"에서 얼굴의 컨트롤 이미지를 업로드할 수 있습니다. 이 모델은 생성을 제어하기 위해 얼굴의 핵심 포인트 5개를 추출합니다. 이것은 필수품이 아닙니다. 마지막으로 "생성"을 클릭하여 이미지를 생성합니다.
2. 얀 레쿤의 사진이 여기에 업로드되었는데, 생성된 효과가 꽤 좋은 것을 볼 수 있습니다.
*프롬프트: 자신감 넘치는 세련된 신사. 그는 높은 칼라가 달린 1990년대 갈색 플레드 재킷을 입고 있으며, 짙은 회색 터틀넥과 함께 착용했습니다. 그의 바지는 몸에 꼭 맞고 짙은 갈색이며, 세련된 가죽 벨트로 더욱 돋보입니다. 배경에는 책장, 대리석 벽난로, 따뜻한 조명이 있는 우아한 도서관이 있어 세련되고 아늑한 분위기를 조성합니다. 그의 편안한 자세와 주머니에 손을 넣은 듯한 캐주얼한 자세는 그의 차분하고 세련된 태도에 더해졌습니다.
위의 내용은 이번에 HyperAI가 추천하는 튜토리얼입니다. 와서 직접 시도해 보세요!
튜토리얼 주소:https://go.hyper.ai/xQnpS