HyperAIHyperAI

Command Palette

Search for a command to run...

Einbeziehung von Word Attention in die zeichenbasierte Wortsegmentierung

Shohei Higashiyama Masao Utiyama Yoshiaki Oida Yohei Sakamoto Masao Ideuchi Eiichiro Sumita Isaac Okada

Zusammenfassung

Neuronale Netzwerkmodelle werden aktiv zur Wortsegmentierung, insbesondere für Chinesisch, eingesetzt, da sie den Aufwand bei der Merkmalsingenieurarbeit minimieren. Typische Segmentierungsmodelle werden in zeichenbasierte Modelle, die präzise Inferenz ermöglichen, und wortbasierte Modelle, die informationsreiche Wortniveau-Informationen nutzen, eingeteilt. Wir schlagen ein zeichenbasiertes Modell vor, das Wortinformationen nutzt, um die Vorteile beider Modelltypen zu kombinieren. Unser Modell lernt mithilfe einer Aufmerksamkeitsmechanik die Bedeutung mehrerer möglicher Wörter für ein Zeichen und nutzt diese Erkenntnis für die Segmentierungsentscheidung. Die experimentellen Ergebnisse zeigen, dass unser Modell sowohl auf japanischen als auch auf chinesischen Benchmark-Datensätzen eine bessere Leistung als die aktuell besten Modelle erzielt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Einbeziehung von Word Attention in die zeichenbasierte Wortsegmentierung | Paper | HyperAI