Open-Sora-Plan 데모를 온라인으로 실행하세요

모델 소개

Open-Sora-Plan은 OpenAI의 Sora(T2V 모델)를 재현하고 Video-VQVAE(VideoGPT) + DiT에 대한 지식을 구축하는 것을 목표로 하는 오픈 소스 프로젝트입니다. 이 프로젝트는 베이징 대학과 투잔 인텔리전트 테크놀로지 주식회사가 공동으로 추진했으며, 연구를 통해 영상 생성 품질과 텍스트 제어 능력이 크게 향상되었습니다. 이 모델은 10초, 24FPS 1024×1024 HD 비디오를 생성할 수 있으며, 고해상도 이미지 생성도 지원하여 사용자에게 더욱 풍부하고 세부적인 시각적 경험을 제공합니다.

실행 방법

1. 새 터미널 페이지를 엽니다.

2. 다음 명령을 입력하여 종속 환경을 설치합니다.

cd Open-Sora-Plan
pip install diffusers==0.27.2 gradio==4.0.0 einops omegaconf==2.1.1 pytorch_lightning==2.2.1 sentencepiece transformers==4.39.1 accelerate==0.28.0

3. Gradio 데모를 실행하려면 다음 명령을 입력하세요.

python -m opensora.serve.gradio_web_server

4. 오른쪽의 "API 주소"를 엽니다. 실명 인증이 되어 있지 않다면 먼저 실명 인증을 하셔야 합니다.