ROCOv2 방사선학 다중모달 의료 영상 데이터 세트

ROCOv2(Radiology Object in COntext Version 2)는 방사선 영상과 관련 의료 개념 및 설명을 결합한 혁신적인 다중 모달 의료 영상 데이터 세트입니다. 이 데이터 세트는 PMC 오픈 액세스 하위 세트에서 방사선 이미지와 관련 의학적 개념 및 설명을 추출한 것으로, ROCO 데이터 세트의 업데이트된 버전으로, 35,705개의 새로운 이미지를 추가하고 개념 추출 및 필터링을 개선했습니다.

이 데이터 세트에는 다양한 임상 양식, 해부학적 영역, 방향(X선의 경우)을 포괄하는 79,789개의 방사선 이미지가 포함되어 있으며, 각 이미지에는 해당 의학적 개념 설명이 포함되어 있습니다.

ROCOv2 데이터 세트의 용도는 다음과 같습니다. 이미지-캡션 쌍을 기반으로 한 이미지 주석 모델 학습, UMLS 개념을 사용한 다중 레이블 이미지 분류, 의료 분야에서의 모델 사전 학습, 다중 작업 학습에서 딥 러닝 모델 평가, 이미지 검색 및 캡션 생성 작업. 또한, 의료 분야에서 ROCOv2 데이터 세트의 적용 가치는 다양한 모달리티의 모델(예: 이미지 캡션 생성)을 훈련하고 평가하거나, 의료 분야에 특화된 효율적인 이미지 검색 시스템을 구축하고 훈련하는 데 사용할 수 있는 방대한 양의 생물의학 지식을 포함하고 있다는 점에 있습니다.