HyperAIHyperAI

Command Palette

Search for a command to run...

UnitedQA: Ein hybrider Ansatz für die offene Domänen-Fragebeantwortung

Hao Cheng Yelong Shen Xiaodong Liu Pengcheng He Weizhu Chen Jianfeng Gao

Zusammenfassung

Bisher konzentriert sich der Großteil der aktuellen Forschung im Rahmen des Retrieval-Reader-Paradigmas für offene Domänen-Frage-Antwort-Systeme entweder ausschließlich auf extraktive oder auf generative Reader. In diesem Artikel untersuchen wir einen hybriden Ansatz, um die Stärken beider Modelltypen zu nutzen. Wir wenden neuartige Techniken an, um sowohl extraktive als auch generative Reader, die auf jüngsten vortrainierten neuronalen Sprachmodellen basieren, zu verbessern, und zeigen, dass geeignete Trainingsmethoden zu erheblichen Verbesserungen gegenüber vorherigen State-of-the-Art-Modellen führen können. Wir demonstrieren, dass ein einfacher hybrider Ansatz, der Antworten beider Reader kombiniert, effizient die Vorteile der extraktiven und generativen Antwortinferenzstrategien nutzt und sowohl einzelne Modelle als auch homogene Ensembles übertrifft. Unser Ansatz erreicht auf NaturalQuestions und TriviaQA jeweils eine Verbesserung von 3,3 bzw. 2,7 Punkten in der Exact-Match-Metrik gegenüber früheren State-of-the-Art-Modellen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp