HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

Aufgabenorientierte Wort-Embedding für die Textklassifikation

{He-Yan Huang Yang Gao Qian Liu Yuxin Tian Xiaochi Wei Luyang Liu}

Aufgabenorientierte Wort-Embedding für die Textklassifikation

Abstract

Verteilte Wortrepräsentationen spielen eine zentrale Rolle bei verschiedenen Aufgaben des natürlichen Sprachverstehens. Trotz ihres Erfolgs berücksichtigen die meisten bestehenden Methoden lediglich kontextuelle Informationen, was bei der Anwendung auf verschiedene Aufgaben suboptimal ist, da fehlende aufgabe-spezifische Merkmale vorliegen. Rationale Wortembeddings sollten die Fähigkeit besitzen, sowohl semantische als auch aufgabe-spezifische Merkmale von Wörtern zu erfassen. In diesem Artikel stellen wir eine aufgabeorientierte Wortembeddings-Methode vor und wenden sie auf die Textklassifikation an. Durch die Integration eines funktionssensiblen Komponenten regularisiert unsere Methode die Verteilung der Wörter, um sicherzustellen, dass der Embedding-Raum eine klare Klassifikationsgrenze aufweist. Wir evaluieren unsere Methode anhand von fünf Textklassifikationsdatensätzen. Die Experimente zeigen, dass unsere Methode die Stand-of-the-Art-Methoden signifikant übertrifft.

Benchmarks

BenchmarkMethodikMetriken
sentiment-analysis-on-imdbToWE-SG
Accuracy: 90.8
sentiment-analysis-on-sst-2-binaryToWE-CBOW
Accuracy: 78.8
text-classification-on-ag-newsToWE-SG
Error: 14.0

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Aufgabenorientierte Wort-Embedding für die Textklassifikation | Forschungsarbeiten | HyperAI