온라인 튜토리얼: 물리적 AI 시스템 혁신, NVIDIA World 기본 모델의 빠른 시작, 햇빛과 안개 시뮬레이션 가능
1월 초에 열린 CES 2025 컨퍼런스에서 황런쉰은 새로운 가죽 재킷을 선보이며 모든 사람에게 여러 가지 놀라움을 선사했습니다. '세계에서 가장 빠른 GPU RTX 5090' 외에도 세계 기본 모델인 코스모스도 폭넓은 관심을 모았습니다.
"AI의 다음 전선은 물리학입니다." 황은 코스모스를 사용하여 이러한 추세 분석의 출처와 신뢰성을 직관적으로 설명했습니다.
이름에서 알 수 있듯이, 세계 모델은 가상 세계를 생성하고 시뮬레이션하여 장면 내 객체의 공간적 관계와 물리적 상호 작용을 시뮬레이션할 수 있습니다. 구체적으로,코스모스 세계 기반 모델은 물리학을 기반으로 한 비디오 생성을 위한 개방형 확산 및 자기회귀 변환기 모델 집합입니다.2,000만 시간에 달하는 실제 인간 상호작용, 환경, 산업, 로봇공학 및 운전 데이터를 기반으로 훈련된 9조 개의 토큰입니다.
엔비디아의 수석 과학자 짐 팬은 자신의 소셜 계정에서 코스모스에 대한 정확한 요약을 제공했습니다.
* 두 가지 모드를 사용할 수 있습니다.확산 패턴(연속 마커) 및 자기회귀 패턴(불연속 마커)
* 두 가지 세대 방식 지원:
텍스트를 비디오로(텍스트->비디오) 및 텍스트 + 비디오를 비디오로(텍스트+비디오->비디오)
모든 사람이 이 혁신적인 세계 기본 모델을 경험할 수 있도록, HyperAI 공식 웹사이트의 튜토리얼 섹션에서 "Cosmos 세계 기본 모델의 원클릭 배포"가 시작되었습니다. 관심 있는 친구들은 와서 직접 시도해보세요 ~
튜토리얼 주소:
데모 실행
1. hyper.ai에 로그인하고 튜토리얼 페이지에서 '한 번의 클릭으로 Cosmos World 기본 모델 배포'를 선택하고 '이 튜토리얼을 온라인으로 실행'을 클릭합니다.
2. 페이지가 이동한 후 오른쪽 상단의 "복제"를 클릭하여 튜토리얼을 자신의 컨테이너로 복제합니다.
3. "NVIDIA RTX A6000" 컴퓨팅 파워와 "PyTorch" 이미지를 선택하세요. 귀하의 요구 사항에 따라 "사용 후 결제" 또는 "일일/주간/월간 패키지"를 선택한 후 마지막으로 "계속"을 클릭하세요.
신규 사용자는 아래 초대 링크를 사용하여 등록하고 RTX 4090 4시간 + CPU 자유 시간 5시간을 받으세요!
HyperAI 독점 초대 링크(복사하여 브라우저에서 열기):
https://openbayes.com/console/signup?r=Ada0322_QZy7
또한, 오픈베이즈의 새해 이벤트도 진행 중이며, 싱글카드 RTX 4090과 RTX A6000 패키지는 주간, 주간 모두 반값입니다!
4. 리소스가 할당될 때까지 기다리세요. 첫 번째 클로닝 과정은 약 7분이 걸립니다. 상태가 "실행 중"으로 변경되면 "작업 공간 열기"를 클릭하고 "터미널"을 엽니다.
5. 다음 명령을 입력하여 환경을 활성화합니다.
conda activate ./cosmos
6. 다음 명령을 입력하여 Cosmos 디렉토리로 전환합니다.
cd Cosmos
7. 다음 명령을 입력하여 모델 그라디오 인터페이스를 시작합니다.
PYTHONPATH=$(pwd) python cosmos1/models/diffusion/inference/gradio_text2world.py --checkpoint_dir checkpoints --diffusion_transformer_dir Cosmos-1.0-Diffusion-7B-Text2World --offload_prompt_upsampler --offload_text_encoder_model --offload_guardrail_models --video_save_name Cosmos-1.0-Diffusion-7B-Text2World --checkpoint_dir /input0포트 8080이 나타나면 오른쪽의 API 주소를 열어 gradio 인터페이스에 접속합니다.
효과 표시
1. 그라디오 인터페이스에 들어간 후, "프롬프트 입력"에 프롬프트 단어를 입력하고 "제출"을 클릭하여 추론을 시작합니다. 몇 분간 기다리면 생성된 비디오를 볼 수 있습니다.
저는 자연 풍경을 담은 영상을 만들었는데, 참고하실 수 있도록 아래에 프롬프트를 첨부했습니다.
프롬프트: 어느 날 아침, 태양이 산 위의 구름 사이로 비치며 고요한 호수를 비췄습니다. 호수는 맑고 무성한 푸른 숲으로 둘러싸여 있습니다. 멀리 보이는 산들은 안개에 싸여 있고, 하늘에는 몇 마리의 새가 날고 있으며, 공기는 상쾌하고 조용하고 평화롭습니다.
우리는 "안정 확산 튜토리얼 교환 그룹"을 만들었습니다. 다양한 기술적인 문제를 논의하고 신청 결과를 공유하기 위해 그룹에 가입해 주세요~
아래의 QR 코드를 스캔하여 WeChat에 HyperaiXingXing을 추가하세요(WeChat ID: Hyperai01). 그리고 "SD 튜토리얼 교환 그룹"을 메모하여 그룹 채팅에 참여하세요.
