2달 전

자연어 문장의 양방향 다각도 일치

Zhiguo Wang; Wael Hamza; Radu Florian
자연어 문장의 양방향 다각도 일치
초록

자연어 문장 일치는 다양한 작업을 위한 기초적인 기술입니다. 이전 접근 방식은 단일 방향에서 문장을 일치시키거나 단일 세분화(단어-단어 또는 문장-문장) 일치만 적용하였습니다. 본 연구에서는 '일치-집계' 프레임워크 하에 양방향 다중 관점 일치(BiMPM) 모델을 제안합니다. 두 문장 $P$와 $Q$가 주어지면, 우리의 모델은 먼저 BiLSTM 인코더를 사용하여 이를 인코딩합니다. 그 다음, 두 개의 인코딩된 문장을 두 방향($P \rightarrow Q$ 및 $P \leftarrow Q$)으로 일치시킵니다. 각 일치 방향에서, 한 문장의 각 시간 단계는 다른 문장의 모든 시간 단계와 여러 관점에서 비교됩니다. 그런 다음, 또 다른 BiLSTM 레이어를 사용하여 일치 결과를 고정 길이의 일치 벡터로 집계합니다. 마지막으로, 일치 벡터를 바탕으로 완전 연결 레이어를 통해 결정을 내립니다. 우리는 우리의 모델을 동의어 식별, 자연어 추론 및 답변 문장 선택이라는 세 가지 작업에서 평가하였습니다. 표준 벤치마크 데이터셋에 대한 실험 결과는 우리의 모델이 모든 작업에서 최신 성능을 달성하였음을 보여줍니다.