초록
단일 RGB 이미지로부터 3D 손 모양 재구성과 손-객체 그립 최적화를 위한 새로운 프레임워크를 제안한다. 정확한 재구성에 있어 손-객체 접촉 영역의 표현이 핵심적인 역할을 한다. 기존의 연구에서 접촉 영역을 희소한 점들로 근사하는 방식과 달리, 본 논문에서는 UV 좌표 맵 형태의 밀도 높은 표현 방식을 제안한다. 더불어, 추론 시점 최적화(inference-time optimization)를 도입하여 그립을 세밀하게 조정하고 손과 객체 간의 상호작용을 향상시킨다. 제안하는 파이프라인은 손 모양 재구성 정확도를 높이며 생동감 있는 손 텍스처를 생성한다. Ho3D, FreiHAND, DexYCB 등 다양한 데이터셋에서의 실험 결과, 본 연구에서 제안하는 방법이 기존 최고 수준의 기법들을 능가함을 입증하였다.