다중 모드 감성 분석: 계층적 융합과 문맥 모델링을 이용한 접근

다중 모드 감성 분석은 매우 활발히 성장하고 있는 연구 분야입니다. 이 분야에서 유망한 기회 영역 중 하나는 다중 모드 융합 메커니즘을 개선하는 것입니다. 우리는 계층적으로 진행되는 새로운 특성 융합 전략을 제시합니다. 먼저 두 개의 모드를 서로 융합하고, 그 다음에 모든 세 가지 모드를 융합합니다. 개별 발화의 다중 모드 감성 분석에서 우리의 전략은 기존의 특성 연결 방법보다 1% 우수하며, 이는 오류율이 5% 감소하는 것을 의미합니다. 여러 발화가 포함된 비디오 클립의 발화 수준 다중 모드 감성 분석에서는 현재 최신 기술들이 동일한 클립 내 다른 발화들의 문맥 정보를 활용하지만, 우리의 계층적 융합 방법은 현재 사용되는 특성 연결 방법보다 최대 2.4%(거의 10% 오류율 감소) 우수한 결과를 보여줍니다. 우리의 방법 구현은 오픈 소스 코드 형태로 공개되어 있습니다.