4달 전

질문의 신경망 동의어 식별을 위한 노이즈 사전 학습

Gaurav Singh Tomar; Thyago Duque; Oscar Täckström; Jakob Uszkoreit; Dipanjan Das
질문의 신경망 동의어 식별을 위한 노이즈 사전 학습
초록

우리는 질문의 동의어 식별 문제에 대한 해결책을 제시합니다. 최근 이진 동의어 라벨로 주석이 달린 질문 쌍 데이터셋에 초점을 맞추고, 분해 가능한 주의 모델(Parikh 등, 2016)의 변형이 이 작업에서 정확한 성능을 내면서도 많은 경쟁 신경망 구조보다 훨씬 단순하다는 것을 보여줍니다. 또한, 자동으로 수집된 질문 동의어의 노이즈가 있는 데이터셋에서 사전 학습된 경우, 해당 데이터셋에서 최고의 보고된 성능을 얻습니다.