17일 전

시각-언어 정렬을 통한 계층적 세분화를 통한 거시적에서 미시적까지의 코로나19 세그멘테이션

Dandan Shan, Zihan Li, Wentao Chen, Qingde Li, Jie Tian, Qingqi Hong
시각-언어 정렬을 통한 계층적 세분화를 통한 거시적에서 미시적까지의 코로나19 세그멘테이션
초록

코로나19 병변의 세분화는 의료진이 코로나19를 보다 정확하게 진단하고 치료하는 데 도움을 줄 수 있다. 그러나 코로나19 데이터셋에서 상세한 정보와 고품질의 레이블링이 부족하여 관련 연구는 여전히 제한적이다. 이러한 문제를 해결하기 위해, 본 연구에서는 이미지 정보의 병변 위치와 병변 수를 포함한 텍스트 정보를 시각-언어 정렬을 통해 통합하는 계층적 세분화 프레임워크인 C2FVL(Coarse-to-Fine segmentation framework via Vision-Language alignment)을 제안한다. 텍스트 정보의 도입을 통해 네트워크는 도전적인 데이터셋에서도 보다 우수한 예측 성능을 달성할 수 있다. 제안한 방법은 흉부 X선 및 CT 이미지를 포함한 두 가지 코로나19 데이터셋에서 광범위한 실험을 수행하였으며, 실험 결과 본 연구에서 제안하는 방법이 기존 최첨단 세분화 기법들을 모두 상회함을 입증하였다.

시각-언어 정렬을 통한 계층적 세분화를 통한 거시적에서 미시적까지의 코로나19 세그멘테이션 | 최신 연구 논문 | HyperAI초신경