HyperAIHyperAI

Command Palette

Search for a command to run...

多尺度動的および階層的な関係モデルによる顔の動作単位認識

Zihan Wang Siyaong Song* Cheng Luo Songhe Deng Weicheng Xie Linlin Shen*

概要

人間の表情動作単位(AUs)は階層的な関係で相互に関連しており、空間的および時間的領域において互いに連携しているだけでなく、同じまたは近接した顔の部位にあるAUsは異なる部位にあるものよりも強い関連性を示します。既存の手法ではこのようなAUs間の階層的相互依存関係を完全にモデル化していませんが、本論文では、AUsの発現認識のために、多尺度のAUs関連動態と階層的な空間時間的関係を包括的にモデル化する方法を提案します。具体的には、まず異なる空間スケールでのフレーム間の顔面動態を明確に捉えるために、新しい多尺度時差ネットワークと適応重み付けブロックを提案します。これは特に、異なるAUsの活性化範囲と大きさの異質性を考慮しています。次に、二段階戦略を導入し、空間分布に基づいてAUs間の関係性を階層的にモデル化します(すなわち、局所的なAU関係モデリングとクロスリージョンのAU関係モデリング)。BP4DおよびDISFAデータセットでの実験結果は、我々の手法がAU発現認識分野における最新の最先端技術であることを示しています。我々のコードは公開されており、以下のURLからアクセスできます: https://github.com/CVI-SZU/MDHR.


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています