HyperAIHyperAI

Command Palette

Search for a command to run...

BERTを用いた分離型アテンションを用いたアスペクトベースセンチメント分析

Ricardo M. Marcacini Emanuel H. Silva

概要

Aspect-Based Sentiment Analysis(ABSA)タスクは、製品やサービスのさまざまな側面に関する消費者の意見を特定することを目的としています。BERTを基盤とする言語モデルは、感情分析など、言語の深い理解を必要とするアプリケーションにおいて、成功裏に活用されてきました。本論文では、ABSAタスクにおけるBERTベースのテキスト表現の向上を目指し、分離学習(disentangled learning)の活用を検討しています。コンピュータビジョン分野における分離表現学習の成功に触発され、データ表現の説明的要因を獲得することを目的として、構文的特徴と意味的特徴をBERTアーキテクチャから分離する最新のDeBERTaモデル(Decoding-enhanced BERT with Disentangled Attention)を用いて分析を行いました。実験結果から、分離 Attention 機構とシンプルなファインチューニング戦略を導入することで、ABSAのベンチマークデータセットにおいて、既存の最先端モデルを上回る性能が達成されたことが示されました。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています