HyperAIHyperAI

Command Palette

Search for a command to run...

Die NarrativeQA-Leseverständnis-Herausforderung

Tomáš Kočiský Jonathan Schwarz Phil Blunsom Chris Dyer Karl Moritz Hermann Gábor Melis Edward Grefenstette

Zusammenfassung

Leseverständnis (LV) – im Gegensatz zur Informationsgewinnung – erfordert die Integration von Informationen und das Schließen über Ereignisse, Entitäten und ihre Beziehungen im gesamten Dokument. Die Fähigkeit des Leseverständnisses wird traditionell durch Fragenbeantwortung bei sowohl künstlichen Agenten als auch bei Kindern, die lesen lernen, bewertet. Allerdings sind bestehende LV-Datensätze und -Aufgaben hauptsächlich von Fragen dominiert, die durch die Auswahl von Antworten aufgrund oberflächlicher Informationen (z.B. lokaler Kontextähnlichkeit oder globaler Terminusauftrittshäufigkeit) gelöst werden können; sie testen daher nicht das wesentliche integrative Element des Leseverständnisses. Um Fortschritte in der tiefgründigen Sprachverarbeitung zu fördern, präsentieren wir einen neuen Datensatz und eine Reihe von Aufgaben, bei denen der Leser Fragen zu Geschichten beantworten muss, indem er ganze Bücher oder Drehbücher liest. Diese Aufgaben sind so gestaltet, dass das erfolgreiche Beantworten ihrer Fragen ein Verständnis der zugrundeliegenden Erzählstruktur erfordert, anstatt sich auf flache Mustererkennung oder Wichtigkeit zu stützen. Wir zeigen, dass Menschen die Aufgaben leicht lösen können, während standardmäßige LV-Modelle Schwierigkeiten damit haben. Wir geben eine Analyse des Datensatzes und der Herausforderungen, die er darstellt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Die NarrativeQA-Leseverständnis-Herausforderung | Paper | HyperAI