
우리는 3D 인간 전신 자세 추정을 위한 벤치마크를 제시합니다. 이 벤치마크는 얼굴, 손, 몸통, 그리고 발을 포함한 인간의 전체 신체에서 정확한 3D 키포인트를 식별하는 것을 포함합니다. 현재, 완전히 주석이 달리고 정확한 3D 전신 데이터셋의 부족으로 인해 딥 네트워크는 특정 신체 부위에 대해 별도로 훈련되며, 추론 시 결합됩니다. 또는 매개변수화된 신체 모델에 의해 제공되는 의사-기준점(groundtruth)에 의존하지만, 이는 감지 기반 방법만큼 정확하지 않습니다. 이러한 문제를 해결하기 위해, COCO 전신 레이아웃을 사용하여 Human3.6M 데이터셋에 대한 전신 주석을 제공하는 Human3.6M 3D WholeBody (H3WB) 데이터셋을 소개합니다. H3WB는 새로운 다중 시점 파이프라인 덕분에 10만 장의 이미지에 133개의 전신 키포인트 주석을 포함하고 있습니다. 또한 우리는 세 가지 작업을 제안합니다: i) 2D 완전 전신 자세로부터 3D 전신 자세 리프팅, ii) 2D 불완전 전신 자세로부터 3D 전신 자세 리프팅, iii) 단일 RGB 이미지로부터 3D 전신 자세 추정입니다. 또한, 이러한 작업들에 대한 인기 있는 방법들의 여러 베이스라인 결과를 보고합니다. 더 나아가, TotalCapture의 자동화된 3D 전신 주석을 제공하며 실험적으로 H3WB와 함께 사용할 때 성능 개선에 도움이 됨을 보여줍니다. 코드와 데이터셋은 https://github.com/wholebody3d/wholebody3d 에서 이용 가능합니다.