HyperAIHyperAI

Command Palette

Search for a command to run...

文字ベースの単語分割への単語アテンションの組み込み

Shohei Higashiyama Masao Utiyama Yoshiaki Oida Yohei Sakamoto Masao Ideuchi Eiichiro Sumita Isaac Okada

概要

ニューラルネットワークモデルは、特徴工学の手間を最小限に抑えることができる点から、特に中国語における単語分割に積極的に応用されてきた。代表的な分割モデルは、正確な推論を実現するための文字ベースモデルと、単語レベルの情報を活用するための単語ベースモデルに分類される。本研究では、両モデルの利点を活かすために、単語情報を活用する文字ベースモデルを提案する。本モデルは、アテンション機構に基づき、ある文字に対して複数の候補単語の重要性を学習し、その情報を分割決定に活用する。実験の結果、日本語および中国語のベンチマークデータセットにおいて、既存の最先端モデルを上回る性能を達成した。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています