2ヶ月前

深層オートエンコーダを用いた人間の姿勢推定と体型モデルの拡大

Matthew Trumble; Andrew Gilbert; Adrian Hilton; John Collomosse
深層オートエンコーダを用いた人間の姿勢推定と体型モデルの拡大
要約

我々は、疎な広基線カメラビューから3次元の人間の姿勢と体型を同時に推定する方法を提案します。双方向損失を用いて、骨格関節位置を符号化する潜在表現の学習と、同時に体積的な体型の深層表現の学習を強制する対称的な畳み込み自己符号化器を訓練しました。後者を利用して、入力体積データを4倍に拡大(アップスケーリング)し、骨格関節位置の3次元推定値を現行最高峰の精度同等またはそれ以上で回復させます。推論はリアルタイム(25 fps)で実行され、高忠実度の人間体型と姿勢の推定が求められる受動的人間行動監視に利用する可能性があります。