2달 전
SynTQA: 텍스트-SQL 혼합 및 E2E TQA를 통한 시너지 효과 기반 표 형식 질문 응답
Zhang, Siyue ; Luu, Anh Tuan ; Zhao, Chen

초록
텍스트-투-SQL 파싱과 엔드-투-엔드 질문 응답(E2E TQA)은 테이블 기반 질문 응답 작업의 두 가지 주요 접근 방식입니다. 여러 벤치마크에서 성공을 거두었음에도 불구하고, 이들 방식 간의 비교는 아직 이루어지지 않았으며 그 시너지는 탐구되지 않았습니다. 본 논문에서는 최신 모델들을 벤치마크 데이터셋에 대해 평가하여 서로 다른 장점과 단점을 식별합니다: 텍스트-투-SQL은 산술 연산과 긴 테이블을 포함하는 질문 처리에서 우수한 성능을 보이는 반면, E2E TQA는 모호한 질문, 비표준 테이블 스키마, 그리고 복잡한 테이블 내용 처리에서 뛰어납니다. 이러한 두 가지 장점을 결합하기 위해, 우리는 모델 유형에 상관없이 답변 선택을 통해 다양한 모델을 통합하는 시너지적 테이블 기반 질문 응답 접근 방식을 제안합니다. 추가 실험 결과, 피처 기반 또는 LLM 기반 답변 선택기를 사용하여 모델들을 앙상블하면 개별 모델보다 성능이 크게 향상됨을 확인하였습니다.