HyperAIHyperAI

Command Palette

Search for a command to run...

Dokumentbasierte Entitätsorientierte Extraktion als Vorlagengenerierung

Kung-Hsiang Huang Sam Tang Nanyun Peng

Zusammenfassung

Die dokumentenbasierte entitätszentrierte Extraktion (EE), die darauf abzielt, entitätsbezogene Informationen wie Entitätsrollen und Entitätsbeziehungen zu extrahieren, ist entscheidend für die automatische Wissensgewinnung aus Textkorpora in verschiedenen Bereichen. Die meisten dokumentenbasierten EE-Systeme erstellen extraktive Modelle, die Schwierigkeiten haben, langfristige Abhängigkeiten zwischen den Entitäten auf Dokumentenebene zu modellieren. Um dieses Problem zu lösen, schlagen wir einen generativen Rahmen für zwei dokumentenbasierte EE-Aufgaben vor: die Extraktion von Rollenfüllern (REE) und die Beziehungsextraktion (RE). Wir formulieren diese zunächst als ein Template-Generierungsproblem, was es den Modellen ermöglicht, effizient Quer-Entitätsabhängigkeiten zu erfassen, Label-Semantik auszunutzen und die exponentielle Rechenaufwandkomplexität bei der Identifikation von N-stelligen Beziehungen zu vermeiden. Ein neuartiges cross-attention-gesteuertes Kopiermechanismus, TopK Copy, wird in ein vorgefertigtes Sequenz-zu-Sequenz-Modell integriert, um dessen Fähigkeit zur Identifikation von Schlüsselinformationen im Eingabetext zu verbessern. Experimente mit dem MUC-4- und SciREX-Datensatz zeigen neue Stand der Technik-Ergebnisse bei REE (+3,26 %), binärer RE (+4,8 %) und 4-stelliger RE (+2,7 %) in Bezug auf den F1-Score.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Dokumentbasierte Entitätsorientierte Extraktion als Vorlagengenerierung | Paper | HyperAI