UCIT는 정식 명칭이 Unseen Continual Instruction Tuning으로, 중국과학원 자동화연구소, 첨단학제과학대학, 중국과학원 인공지능대학이 2025년에 공동으로 발표한 다중모달 대규모 언어 모델의 지속적 명령어 튜닝을 위한 벤치마크 데이터 세트입니다.HiDe-LLaVA: 다중 모드 대규모 언어 모델의 연속적 명령 튜닝을 위한 계층적 분리".

이 데이터셋은 엄선된 6개의 작업 하위 집합으로 구성되어 있으며, 각 하위 집합은 지도 학습 미세 조정 과정에서 모델이 접하지 못한 작업 유형에 해당합니다. 이러한 하위 집합들을 통해 모델의 적응성과 구조 보존 능력을 공정하게 평가하는 데 사용할 수 있는 까다로운 "미확인 작업" 테스트 집합을 형성합니다. 각 예시는 작업 프롬프트/명령과 그에 상응하는 예상 정답 실행(실제 응답)으로 구성되며, 이는 제로샷 조건에서 모델의 성능을 측정하는 데 사용됩니다.