L'ensemble de données HandNet contient des cartes de profondeur des mains non déformées de manière non rigide de 10 participants devant une caméra RealSense RGB-D. Les annotations sont générées à l’aide d’une technique d’annotation magnétique. Le centre de la main et les cinq bouts des doigts ont une pose 6D (c'est-à-dire la position et l'orientation de chaque bout de doigt).

L'ensemble de données contient un total de 214 971 cartes de profondeur, dont 202 198 ensembles d'entraînement, 10 000 ensembles de tests et 2 773 ensembles de validation.