HyperAIHyperAI

Command Palette

Search for a command to run...

vLLM + 개방형 WebUI 배포 gemma-3-270m-it

날짜

9달 전

태그

논문 URL

2503.19786

라이선스

其他

GPU 컴퓨팅 에어드롭

단 20시간의 RTX 5090 컴퓨팅 리소스 $1 (가치 $7)
지금 사용하기

1. 튜토리얼 소개

gemma-3-270m은 Google이 2025년 3월 12일에 출시한 Gemma 3 시리즈의 경량 명령어 미세 조정 모델입니다. 2억 7천만 개의 파라미터로 구축된 이 모델은 효율적인 대화 상호작용과 경량 배포에 중점을 두고 있습니다. 이 경량의 효율적인 모델은 단일 GPU에서 1GB 이상의 VRAM만 필요로 하므로 엣지 디바이스 및 저자원 환경에 적합합니다. 일상적인 질문과 답변, 간단한 작업 지시에 특화된 다중 턴 대화를 지원하며, 텍스트 생성 및 이해에 초점을 맞추고 있습니다(이미지와 같은 멀티모달 입력은 지원하지 않습니다). 또한 32,000개 토큰의 컨텍스트 창을 지원하여 긴 텍스트 대화도 처리할 수 있습니다. 관련 연구 논문은 여기에서 확인할 수 있습니다. Gemma 3 기술 보고서 .

이 튜토리얼에서는 단일 RTX 4090 카드에 대한 리소스를 사용합니다.

2. 프로젝트 예시

3. 작업 단계

1. 컨테이너 시작 후 API 주소를 클릭하여 웹 인터페이스로 진입합니다.

2. 웹페이지에 접속 후 모델과 대화를 시작할 수 있습니다.

"모델"이 표시되지 않으면 모델이 초기화 중임을 의미합니다. 모델이 용량이 크므로 2~3분 정도 기다린 후 페이지를 새로고침해 주세요.

사용 방법

4. 토론

🖌️ 고품질 프로젝트를 발견하시면, 백그라운드에 메시지를 남겨 추천해주세요! 또한, 튜토리얼 교환 그룹도 만들었습니다. 친구들의 QR코드 스캔과 [SD 튜토리얼] 댓글을 통해 그룹에 가입하여 다양한 기술 이슈에 대해 논의하고 신청 결과를 공유해 주시기 바랍니다.↓

인용 정보

이 프로젝트에 대한 인용 정보는 다음과 같습니다.

@article{gemma_2025,
    title={Gemma 3},
    url={https://arxiv.org/abs/2503.19786},
    publisher={Google DeepMind},
    author={Gemma Team},
    year={2025}
}

AI로 AI 구축

아이디어에서 출시까지 — 무료 AI 코코딩, 즉시 사용 가능한 환경, 최적의 GPU 가격으로 AI 개발을 가속화하세요.

AI 협업 코딩
바로 사용 가능한 GPU
최적의 가격

HyperAI Newsletters

최신 정보 구독하기
한국 시간 매주 월요일 오전 9시 에 이번 주의 최신 업데이트를 메일로 발송합니다
이메일 서비스 제공: MailChimp