HyperAIHyperAI

Command Palette

Search for a command to run...

R2-D2: Ein modulares Baseline für question answering im offenen Bereich

Martin Fajcik Martin Docekal Karel Ondrej Pavel Smrz

Zusammenfassung

Diese Arbeit stellt einen neuartigen vierstufigen Open-Domain-QA-Pipeline-Rahmenwerk R2-D2 (Rank twice, reaD twice) vor. Die Pipeline besteht aus einem Retriever, einem Passage-Reranker, einem extraktiven Leser, einem generativen Leser sowie einem Aggregationsmechanismus, der die endgültige Vorhersage aus allen Komponenten des Systems generiert. Wir zeigen die Stärke des Ansatzes an drei Open-Domain-QA-Datensätzen: NaturalQuestions, TriviaQA und EfficientQA, wobei die Leistung auf den ersten beiden Datensätzen die bisherigen State-of-the-Art-Ergebnisse übertreffen. Unsere Analyse zeigt: (i) Die Kombination aus extraktivem und generativem Leser führt zu absoluten Verbesserungen von bis zu 5 Punkten im Exact-Match-Maß und ist mindestens doppelt so effektiv wie das Posterior-Averaging-Ensemble derselben Modelle mit unterschiedlichen Parametern, (ii) Ein extraktiver Leser mit weniger Parametern kann die Leistung eines generativen Lesers auf extraktiven QA-Datensätzen erreichen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
R2-D2: Ein modulares Baseline für question answering im offenen Bereich | Paper | HyperAI