11일 전

외부 레이블과 도메인 내 사전 훈련을 통한 다중모달 트랜스포머 강화: 증오스러운 미모 챌린지 우승 솔루션

Ron Zhu
외부 레이블과 도메인 내 사전 훈련을 통한 다중모달 트랜스포머 강화: 증오스러운 미모 챌린지 우승 솔루션
초록

혐오스러운 미모(Detecting Hateful Memes) 탐지 는 최근 등장한 새로운 연구 분야로, 이 작업에서 높은 성능을 내기 위해서는 미모의 시각적 요소와 언어적 의미를 이해하는 능력뿐 아니라, 추가적인 배경 지식까지 필요하다. 본 기술 보고서는 2020년 헤이트풀 미모 탐지 챌린지(Hateful Meme Detection Challenge 2020)에서 1위를 차지한 솔루션을 요약하며, 최신의 시각-언어적 트랜스포머(visual-linguistic transformers) 기술을 확장하여 이 문제에 도전한 접근법을 제시한다. 보고서의 마지막 부분에서는 현재의 방법론이 지닌 한계점과 향후 개선을 위한 가능성이 있는 방향성을 제시한다.

외부 레이블과 도메인 내 사전 훈련을 통한 다중모달 트랜스포머 강화: 증오스러운 미모 챌린지 우승 솔루션 | 최신 연구 논문 | HyperAI초신경