要約
単一のRGB画像から3D手の形状再構成および手と物体の把持最適化を行うための新規フレームワークを提案する。手と物体の接触領域の表現は、正確な再構成において極めて重要である。従来の手法が接触領域を疎な点群で近似するのに対し、本研究ではUV座標マップという密な表現を提案する。さらに、推論時最適化を導入し、把持姿勢を微調整することで、手と物体間の相互作用を向上させる。本パイプラインにより、手の形状再構成精度が向上し、豊かな手のテクスチャを生成することができる。Ho3D、FreiHAND、DexYCBなどのデータセットにおける実験結果から、提案手法が最先端の手法を上回ることを示した。