HyperAI超神经

1986년 CCTV-1에서 방영된 '칼라바시 브라더스'는 공개되자마자 엄청난 호평을 받았으며, 1980~90년대에 태어난 수많은 사람들에게 소중한 어린 시절의 추억이 되었습니다. 하지만 이 고전적인 애니메이션은실제로 이는 직원들이 그린 약 20만 개의 이미지로 구성되어 있습니다.

스토리 전개에 따라 스태프는 캐릭터의 관절을 이어 붙여 포즈를 취하고 초당 24프레임으로 영상 형태로 촬영합니다.이는 관객에게 시각적인 차이를 만들어냅니다.즉, 캐릭터가 움직일 수 있다고 믿어진다.

사실은,동적 영상은 프레임 단위로 연속적으로 재생됩니다.처음에는 사람들이 도화지에 그림을 스케치한 다음, 종이를 빠르게 뒤집어서 이미지가 '살아있는 것처럼 보이게' 만들었습니다. 나중에 컴퓨터와 카메라는 1초에 24개 이상의 프레임을 저장하여 빠르고 연속적인 동적 시각 효과를 만들어낼 수 있었습니다. 지금까지 비디오 기술은 자연 풍경(예: 구름, 유체)의 무작위적 역학이나 특정 영역의 움직임(예: 인체 움직임)을 시뮬레이션하는 데 있어 큰 진전을 이루었습니다.

하지만 실제로 촬영한 장면이든, 가상의 애니메이션이나 만화이든, 역동적인 영상을 표현하려면 연속적인 영상 자료의 지원이 필요합니다. 예를 들어, 꽃이 피는 전체 과정을 보여주려면 사람들은 꽃이 필 때까지 정말 기다렸다가 프레임별로 녹화해야 합니다.

AI의 등장은 이런 한계를 깨뜨린다.CUHK, Tencent 제공 AI 랩 두 회사가 공동으로 출시한 DynamiCrafter 모델은 비디오 확산 사전 기술을 사용하여 실제 동작 패턴을 시뮬레이션합니다.텍스트 명령과 결합하여 사진을 동적 비디오로 변환할 수 있습니다. 풍경, 사람, 동물, 차량, 조각품 등 거의 모든 유형의 정적 이미지를 처리할 수 있습니다. 생성된 동적 비디오는 고화질이고 매우 부드럽고 매끄럽고 모든 디테일이 정확하게 포착되었습니다!

DynamiCrafter는 애플리케이션 시나리오에서 더욱 강력해집니다. 구체적인 적용 사례는 다음과 같습니다(이에 국한되지 않음).

엔터테인먼트 미디어: 영화, 게임, 가상 현실 환경을 위한 역동적인 배경과 캐릭터 애니메이션을 제작합니다.

문화 교육: 역사적 사진을 역동적인 형태로 전환하여 문화 유산과 상호 작용하는 새로운 방식을 제공합니다. 복잡한 개념을 설명하기 위해 이미지를 애니메이션으로 표현한 교육용 비디오를 제작합니다. 과학 연구에서 의사소통 장벽을 줄이기 위해 과학적 데이터나 모델을 직관적 역학으로 변환합니다.

소셜 마케팅: 소셜 미디어 광고 및 브랜딩을 위해 매력적인 모션 그래픽과 짧은 영상을 제작합니다. 모션 그래픽을 통해 스토리를 전달하고 책과 전자책 홍보에 시각적 효과를 더합니다.

모든 사람이 DynamiCrafter를 더 잘 경험할 수 있도록 돕기 위해,HyperAI에서 "DynamiCrafter AI 비디오 생성 도구" 튜토리얼을 출시했습니다!이 튜토리얼은 당신을 위한 환경을 구축했습니다. 더 이상 모델을 다운로드하고 학습할 때까지 기다릴 필요가 없습니다. 복제를 클릭하면 클릭 한 번으로 시작되고, 매끄러운 영상이 즉시 제작됩니다!

튜토리얼 주소:https://hyper.ai/tutorials/31974

위의 튜토리얼은 간단하고 사용하기 쉬운 WebUI를 기반으로 하지만, 로컬 정밀 제어가 제한적입니다. ComfyUI는 노드 기반 인터페이스와 워크플로를 기반으로 합니다. 노드를 변경하면 다양한 효과를 얻을 수 있으며, 사용자에게 더 큰 자유와 창의적인 공간을 제공합니다. 그러므로,HyperAI는 또한 "ComfyUI DynamiCrafter 이미지-비디오 워크플로" 튜토리얼을 출시했습니다.자세한 튜토리얼 내용은 HyperAI가 오늘 발표한 다음 기사를 참조하세요.

데모 실행

1. hyper.ai에 로그인하고, 튜토리얼 페이지에서 DynamiCrafter AI 비디오 생성 도구를 선택한 다음, 이 튜토리얼을 온라인으로 실행을 클릭합니다.

2. 페이지가 이동한 후 오른쪽 상단의 "복제"를 클릭하여 튜토리얼을 자신의 컨테이너로 복제합니다.

3. 오른쪽 하단에 있는 "다음: 해시레이트 선택"을 클릭합니다.

4. 이동 후 "NVIDIA GeForce RTX 4090"을 선택하고 "다음: 검토"를 클릭합니다.신규 사용자는 아래 초대 링크를 사용하여 등록하고 RTX 4090 4시간 + CPU 자유 시간 5시간을 받으세요!

HyperAI 독점 초대 링크(복사하여 브라우저에서 열기):https://openbayes.com/console/signup?r=6bJ0ljLFsFh_Vvej

5. "계속"을 클릭하고 리소스가 할당될 때까지 기다리세요. 첫 번째 복제 과정은 약 3~5분 정도 걸립니다. 상태가 "실행 중"으로 변경되면 "작업 공간 열기"를 클릭합니다.

문제가 10분 이상 지속되고 "리소스 할당 중" 상태로 남아 있는 경우 컨테이너를 중지했다가 다시 시작해 보세요. 재시작해도 문제가 해결되지 않으면 공식 웹사이트의 플랫폼 고객 서비스에 문의하세요.

6. 이 튜토리얼을 통해 다음 두 가지 효과를 얻을 수 있으며, 아래에서 하나씩 설명하겠습니다.
이미지와 텍스트 프롬프트에서 비디오를 생성합니다.
시작 프레임, 끝 프레임, 프롬프트 단어를 사용하여 비디오를 생성합니다.

이미지와 텍스트 프롬프트에서 비디오 생성

1. 새 터미널을 만들고 "cd DynamiCrafter"를 실행하여 DynamiCrafter 디렉토리로 전환합니다.

2. "python gradio_app.py" 명령을 실행하고 잠시 기다리세요. 명령줄이 나타나면 "https://0.0.0.0:8080", 오른쪽에 있는 API 주소를 브라우저 주소창에 복사하여 Gradio 인터페이스를 엽니다.API 주소 접근 기능을 이용하기 위해서는 이용자는 실명인증을 완료해야 합니다.

3. Gradio 페이지를 열고 사진을 업로드하고 텍스트 설명(예: 불꽃놀이)을 추가한 후 "생성"을 클릭하고 잠시 기다리면 비디오가 생성됩니다.

시작 프레임, 종료 프레임 및 프롬프트 단어를 사용하여 비디오를 생성합니다.

1. 터미널 인터페이스로 돌아와서 "Ctrl + C"를 눌러 현재 프로세스를 종료한 다음 "python gradio_app_interp_and_loop.py" 명령을 실행합니다.https://0.0.0.0:8080"를 클릭한 다음 오른쪽에 있는 API 주소를 엽니다.

2. Gradio 페이지에서 시작 프레임 이미지, 끝 프레임 이미지, 텍스트 설명(예: 웃는 소녀)을 업로드하고 "생성"을 클릭하면 비디오가 생성됩니다.

현재 HyperAI 공식 웹사이트에서는 Jupyter Notebook 형태로 구성된 수백 개의 선택된 머신 러닝 관련 튜토리얼을 출시했습니다.

관련 튜토리얼과 데이터 세트를 검색하려면 링크를 클릭하세요.https://hyper.ai/tutorials

위에 적힌 내용이 이번에 HyperAI Super Neural Network가 공유한 내용의 전부입니다. 고품질 프로젝트를 발견하시면, 배경에 메시지를 남겨서 저희에게 추천해 주세요!

CUHK, Tencent 등이 공동으로 출시했습니다! DynamiCrafter: 모든 이미지를 몇 초 만에 매끄러운 초고화질로 역동적인 비디오로 변환할 수 있습니다.