Der EgoDexter-Datensatz bietet 2D- und 3D-Pose-Anmerkungen für 3.190 Frames von 4 Testvideosequenzen. Die Videos wurden aus der Selbstperspektive mit einer bewegungsempfindlichen Kamera aufgenommen und enthalten unübersichtliche Hintergründe, schnelle Kamerabewegungen und komplexe Interaktionen mit verschiedenen Objekten. Unter den 3.190 Bildern sind die Fingerkuppenpositionen in 1.485 Bildern manuell annotiert.