원클릭 배포 Qwen2.5-VL-32B-Instruct

1. 튜토리얼 소개
Qwen2.5-VL-32B-Instruct는 Alibaba Tongyi Qianwen 팀이 2025년 3월 24일에 오픈 소스로 공개한 멀티모달 대규모 모델이며 Apache 2.0 프로토콜에 따라 출시되었습니다. Qwen2.5-VL 시리즈를 기반으로 한 이 모델은 강화 학습 기술을 통해 최적화되었으며, 32B 매개변수 규모로 다중 모드 기능에서 획기적인 성과를 달성했습니다.
🚀 Qwen2.5-VL-32B 충격적인 업그레이드! 더욱 강력한 시각적 AI, 더욱 스마트한 멀티모달 어시스턴트! 🌟
🔥 핵심 기능 업그레이드
- 세밀한 시각적 분석: 의료 영상 분석 및 엔지니어링 도면 인식과 같은 전문 분야에서 이 모델은 픽셀 수준 콘텐츠 캡처 기능을 보여주고 다중 그래프 연관 추론 및 시공간 차원 분석을 지원합니다.
- 출력 스타일 최적화:모델의 출력 내용은 형식 사양과 정보 세부 사항 면에서 인간의 표현 습관에 더 가깝고, 특히 복잡한 시나리오에서 명확한 구조와 엄격한 논리로 솔루션을 생성할 수 있습니다.
- 수학적 추론 혁신: 다변수 방정식과 기하학적 증명을 포함한 복잡한 수학 문제의 경우, 이 모델은 알고리즘 최적화를 통해 문제 해결의 정확도를 업계 최고 수준으로 향상시킵니다.
이 튜토리얼에서는 Qwen2.5-VL-32B를 데모로 사용하며, 컴퓨팅 리소스는 A6000*2입니다.
2. 작업 단계
1. 컨테이너 시작 후 API 주소를 클릭하여 웹 인터페이스로 진입합니다.
"모델"이 표시되지 않으면 모델이 초기화되고 있음을 의미합니다. 모델이 크기 때문에 1~2분 정도 기다리신 후 페이지를 새로고침해 주세요.

2. 웹페이지에 접속 후 모델과 대화를 시작할 수 있습니다.
이 튜토리얼은 "온라인 검색"을 지원합니다. 이 기능을 켜면 추론 속도가 느려지는데, 이는 정상적인 현상입니다.

3. 인터페이스 호출 예제
이 컨테이너는 기본적으로 open-webui를 사용하여 Qwen2.5-VL-32B의 API 서비스를 호출합니다. 로컬로 사용해야 하는 경우 아래의 호출 예를 참조할 수 있습니다.cURL과 Python을 사용하는 예가 포함되어 있습니다..
다음과 같이 API_PATH를 가져옵니다.

🔹 cURL을 사용하여 호출
사용할 수 있습니다 curl
이 명령은 API를 직접 호출합니다.
curl {API_PATH}/v1/chat/completions \
-H "Content-Type: application/json" \
-H "Authorization: Bearer Empty" \
-d '{
"model": "Qwen2.5-VL-32B-Instruct",
"messages": [
{
"role": "user",
"content": [
{"type": "text", "text": "请理解图片中的公式,并做详细解释"},
{"type": "image_url", "image_url": {"url": "https://images2018.cnblogs.com/blog/1203675/201805/1203675-20180525100048863-1610672614.png"}}
]
}
],
"max_tokens": 1024
}'
🐍 Python을 사용하여 호출
꼭 설치해주세요 openai
도서관:
pip install openai
그런 다음 다음 Python 코드를 사용하세요.
from openai import OpenAI
client = OpenAI(api_key="Empty", base_url="{API_PATH}/v1/")
response = client.chat.completions.create(
model="Qwen2.5-VL-32B-Instruct",
messages = [
{
"role": "user",
"content": [
{"type": "text", "text": "请理解图片中的公式,并做详细解释"},
{"type": "image_url", "image_url": {"url": "https://images2018.cnblogs.com/blog/1203675/201805/1203675-20180525100048863-1610672614.png"}}
]
}
],
max_tokens=1000
)
print(response.choices[0].message.content)
이렇게 하면 다양한 환경에서 적절한 방법을 사용하여 Qwen2.5-VL-32B API를 호출할 수 있습니다! 🚀
교류 및 토론
🖌️ 고품질 프로젝트를 발견하시면, 백그라운드에 메시지를 남겨 추천해주세요! 또한, 튜토리얼 교환 그룹도 만들었습니다. 친구들의 QR코드 스캔과 [SD 튜토리얼] 댓글을 통해 그룹에 가입하여 다양한 기술 이슈에 대해 논의하고 신청 결과를 공유해 주시기 바랍니다.↓
