Mantis-Instruct 다중 이미지 명령어 튜닝 데이터 세트

Mantis-Instruct 데이터 세트는 2024년에 워털루 대학교, 청화 대학교, 상하이 인공지능 연구소에서 공개되었습니다.MANTIS: 인터리브 다중 이미지 명령어 튜닝". 다중 이미지 명령어 튜닝에 초점을 맞춘 텍스트-이미지 인터리브 다중 모드 데이터셋으로, 721,000개의 예제를 포함하는 14개의 하위 집합으로 구성되어 Mantis 모델군을 학습하는 데 사용됩니다. 이 데이터셋은 공참조, 추론, 비교, 시간 이해 등 다양한 다중 이미지 기술을 다룹니다. 기존 데이터셋의 10개 하위 집합을 포함할 뿐만 아니라, 모델의 추론 기술 및 기타 다중 이미지 기술을 확장하도록 설계된 새롭게 큐레이션된 4개의 데이터셋을 추가합니다.