HyperAIHyperAI

Command Palette

Search for a command to run...

文脈的マルチモーダル注意機構によるマルチモーダルセンチメント分析

Md. Shad Akhtar Dushyant Chauhan Soujanya Poria Asif Ekbal Pushpak Bhattacharyya Deepanway Ghosal

概要

マルチモーダル感情分析は、テキスト、視覚的、音声的といった異なる入力モダリティを効果的に統合するという課題を抱えている。本論文では、発話レベルの感情予測に向け、文脈情報を活用する再帰型ニューラルネットワークに基づくマルチモーダルアテンションフレームワークを提案する。本手法は、マルチモーダルかつマルチ発話表現に対してアテンションを適用し、それらの表現間における寄与度の高い特徴を学習することを試みる。提案手法の有効性を、CMU Multi-modal Opinion-level Sentiment Intensity(CMU-MOSI)コーパスおよび最近公開されたCMU Multi-modal Opinion Sentiment and Emotion Intensity(CMU-MOSEI)コーパスという2つのマルチモーダル感情分析ベンチマークデータセット上で評価した。評価結果から、MOSIデータセットおよびMOSEIデータセットにおいて、それぞれ82.31%および79.80%の精度を達成した。これは、それぞれのデータセットにおいて、既存の最先端モデルに対して約2ポイントおよび1ポイントの性能向上を示している。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています