위성 이미지 시계열의 팬오프틱 세그멘테이션을 위한 컨볼루셔널 시간 주의 네트워크

다중 시점 위성 영상에 대한 전례 없는 접근성이 다양한 지구 관측 작업에 새로운 시각을 열어주었습니다. 그 중에서도 농지의 픽셀 정밀 팬옵틱 세그멘테이션은 경제적 및 환경적 측면에서 큰 의미를 가집니다. 연구자들은 단일 이미지를 대상으로 이 문제를 탐구해왔지만, 작물 현상학의 복잡한 시간적 패턴은 이미지의 시간 시퀀스를 통해 더 잘 다루어질 수 있다고 주장합니다. 본 논문에서는 위성 영상 시간 시리즈(SITS)의 팬옵틱 세그멘테이션을 위한 첫 번째 단계별, 단일 스테이지 방법을 제시합니다. 이 모듈은 시간적 자기 주의 메커니즘을 기반으로 하는 우리 고유의 이미지 시퀀스 인코딩 네트워크와 결합될 수 있으며, 이를 통해 풍부하고 적응적인 다중 규모 공간-시간 특성을 추출할 수 있습니다. 또한, 팬옵틱 주석이 포함된 첫 번째 공개 접근 가능한 SITS 데이터셋인 PASTIS를 소개합니다. 우리는 우리의 인코더가 여러 경쟁 아키텍처에 비해 의미론적 세그멘테이션에서 우수함을 입증하였으며, SITS의 팬옵틱 세그멘테이션에 대한 최초의 최신 기술 수준을 설정하였습니다. 우리의 구현체와 PASTIS는 공개적으로 이용 가능합니다.