1. 튜토리얼 소개

Dolphin은 ByteDance 팀이 2025년 5월에 출시한 다중 모드 문서 파싱 모델입니다. 이 모델은 먼저 구조를 파싱한 후 콘텐츠를 파싱하는 2단계 방식을 기반으로 합니다. 첫 번째 단계에서는 일련의 문서 레이아웃 요소를 생성하고, 두 번째 단계에서는 이러한 요소를 앵커로 사용하여 콘텐츠를 병렬로 파싱합니다. Dolphin은 다양한 문서 파싱 작업에서 GPT-4.1 및 Mistral-OCR과 같은 모델을 능가하는 우수한 성능을 보입니다. 관련 논문 결과는 다음과 같습니다.Dolphin: 이기종 앵커 프롬프팅을 통한 문서 이미지 구문 분석". ACL 2025에 승인됨.

이 튜토리얼에서는 단일 RTX 4090 카드에 대한 리소스를 사용합니다.

2. 프로젝트 예시

3. 작업 단계

1. 컨테이너 시작 후 API 주소를 클릭하여 웹 인터페이스로 진입합니다.

"잘못된 게이트웨이"가 표시되면 모델이 초기화 중임을 의미합니다. 모델이 크기 때문에 1~2분 정도 기다리신 후 페이지를 새로고침해 주세요.

2. 사용 예

문서 인식

 결과 

요소 인식

결과 

4. 토론

🖌️ 고품질 프로젝트를 발견하시면, 백그라운드에 메시지를 남겨 추천해주세요! 또한, 튜토리얼 교환 그룹도 만들었습니다. 친구들의 QR코드 스캔과 [SD 튜토리얼] 댓글을 통해 그룹에 가입하여 다양한 기술 이슈에 대해 논의하고 신청 결과를 공유해 주시기 바랍니다.↓

인용 정보

이 프로젝트에 대한 인용 정보는 다음과 같습니다.

@inproceedings{dolphin2025,
  title={Dolphin: Document Image Parsing via Heterogeneous Anchor Prompting},
  author={Feng, Hao and Wei, Shu and Fei, Xiang and Shi, Wei and Han, Yingdong and Liao, Lei and Lu, Jinghui and Wu, Binghong and Liu, Qi and Lin, Chunhui and Tang, Jingqun and Liu, Hao and Huang, Can},
  year={2025},
  booktitle={Proceedings of the 65rd Annual Meeting of the Association for Computational Linguistics (ACL)}
}