IEMOCAP 데이터셋을 활용한 다중 모달 감정 인식 연구: 딥 러닝 기반 접근법

감정 인식은 행동의 다양한 측면을 모델링하는 기술이 발전함에 따라 인간-컴퓨터 상호작용(Human Computer Interactions) 분야에서 중요한 연구 영역으로 자리 잡고 있습니다. 기술의 발전에 따라 우리의 감정 이해도가 향상되고 있으며, 이에 따라 자동 감정 인식 시스템에 대한 수요가 증가하고 있습니다. 연구의 한 방향은 신경망(Neural Networks)의 사용으로, 이는 대량이고 다양한 입력 데이터에 의존하는 복잡한 함수를 추정하는 데 능숙합니다. 본 논문에서는 이러한 신경망의 효과성을 활용하여 음성, 텍스트, 그리고 얼굴 표정, 회전, 손동작 등의 모션 캡처 데이터를 사용하여 IEMOCAP 데이터셋에서 다중모달(multimodal) 감정 인식을 수행하려고 합니다. 이전 연구들은 주로 IEMOCAP 데이터셋에서 음성으로부터의 감정 검출에 집중하였으나, 우리 접근법은 IEMOCAP이 제공하는 여러 모달 데이터를 이용하여 더욱 강건하고 정확한 감정 검출을 수행하는 첫 번째 시도입니다.