Command Palette
Search for a command to run...
{Feng Jiang Jian-Guang Lou Chin-Yew Lin Zhiwei Yu Qian Liu Shuang Chen}

要約
本稿では、大規模知識ベース質問応答(KBQA)を対象としたニューラル意味解析フレームワーク「Retriever-Transducer-Checker(ReTraCk)」を提案する。ReTraCkは高い柔軟性を維持するため、モジュール型の構成として設計されている。本フレームワークは、関連する知識ベース(KB)項目を効率的に取得する「リトリーバー」、構文的正しさを保証した論理形式を生成する「トランスデューサー」、およびトランスデュースプロセスを改善する「チェッカー」から構成される。ReTraCkはGrailQAのリーダーボードにおいて全体でトップ1の性能を達成し、WebQuestionsSPベンチマークにおいても非常に競争力のある性能を示した。本システムはユーザーとの即時対話が可能であり、提案するフレームワークの効率性を実証している。
ベンチマーク
| ベンチマーク | 方法論 | 指標 |
|---|---|---|
| knowledge-base-question-answering-on-1 | ReTraCk Oracle EL | F1: 74.7 Hits@1: 74.6 |
| knowledge-base-question-answering-on-1 | ReTraCk | F1: 71 Hits@1: 71.6 |
| knowledge-base-question-answering-on-grailqa | ReTraCk | Compositional EM: 61.5 Compositional F1: 70.9 I.I.D. EM: 84.4 I.I.D. F1: 87.5 Overall EM: 58.1 Overall F1: 65.3 Zero-shot EM: 44.6 Zero-shot F1: 52.5 |