HyperAIHyperAI

Command Palette

Search for a command to run...

JaQuAD: Japanese Question Answering Dataset für Machine Reading Comprehension

ByungHoon So Kyuhong Byun Kyungwon Kang Seongjin Cho

Zusammenfassung

Fragebeantwortung (Question Answering, QA) ist eine Aufgabe, bei der ein maschinelles System ein gegebenes Dokument sowie eine Frage versteht, um eine Antwort zu finden. Trotz beeindruckender Fortschritte im Bereich der natürlichen Sprachverarbeitung (NLP) bleibt QA weiterhin eine herausfordernde Aufgabe, insbesondere für nicht-englischsprachige Texte aufgrund des Mangels an annotierten Datensätzen. In diesem Paper stellen wir den japanischen Fragebeantwortungs-Datensatz JaQuAD vor, der von Menschen annotiert wurde. JaQuAD umfasst 39.696 extraktive Frage-Antwort-Paare auf Basis von Artikeln aus der japanischen Wikipedia. Wir haben ein Basismodell fine-tuned, das auf dem Testset einen F1-Score von 78,92 % und einen EM-Wert von 63,38 % erreicht. Der Datensatz sowie unsere Experimente sind unter https://github.com/SkelterLabsInc/JaQuAD verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp