HyperAIHyperAI

Command Palette

Search for a command to run...

HDBN:ロバストな骨格ベース行動認識のための新規ハイブリッド二重枝分岐ネットワーク

Jinfu Liu Baiqiao Yin Jiaying Lin Jiajun Wen Yue Li Mengyuan Liu

概要

骨格ベースの行動認識は、簡潔かつ堅牢な骨格表現を活用する点から、近年注目を集めています。しかしながら、現在の手法はしばしば単一のバックボーンネットワークを用いて骨格モダリティをモデル化する傾向にあり、これによりネットワークバックボーン固有の限界が生じる場合があります。こうした課題を克服し、異なるネットワークアーキテクチャが持つ補完的な特性を最大限に活かすために、本研究では、グラフ畳み込みネットワーク(GCN)がグラフ構造データを効果的に処理できる点と、Transformerがグローバルな情報に優れたモデリング能力を持つ点を活かした、新たなハイブリッド・デュアルブランチネットワーク(HDBN)を提案します。具体的には、本提案するHDBNは、MixGCNとMixFormerという2つの本体ブランチに分かれています。これらのブランチは、それぞれGCNとTransformerを用いて2次元および3次元の骨格モダリティをモデル化します。提案したHDBNは、2024年ICMEグランドチャレンジにおける「マルチモーダル動画推論・分析コンペティション(MMVRAC)」でトップクラスの性能を発揮し、UAV-Humanデータセットの2つのベンチマークにおいて、それぞれ47.95%および75.36%の精度を達成し、多数の既存手法を上回りました。本研究のコードは、以下のURLにて公開される予定です:https://github.com/liujf69/ICMEW2024-Track10


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています