HyperAIHyperAI
il y a 17 jours

Slovo : Jeu de données de la langue des signes russe

Alexander Kapitanov, Karina Kvanchiani, Alexander Nagaev, Elizaveta Petrova
Slovo : Jeu de données de la langue des signes russe
Résumé

L'une des principales difficultés de la reconnaissance des langues des signes réside dans la difficulté de collecter un jeu de données adapté, en raison de l'écart existant entre les sociétés sourdes et celles entendantes. En outre, la langue des signes varie considérablement d'un pays à l'autre, ce qui impose la création de nouveaux jeux de données pour chacun d'eux. Ce papier présente le jeu de données vidéo de la Langue des Signes Russe (LSR), nommé Slovo, produit à l'aide de plateformes de crowdsourcing. Ce jeu de données comprend 20 000 enregistrements en FullHD, répartis en 1 000 catégories de gestes isolés signés par 194 locuteurs. Nous fournissons également l'intégralité du processus de création du jeu de données, depuis la collecte des données jusqu'à l'annotation vidéo, accompagné d'une application de démonstration. Plusieurs réseaux neuronaux ont été entraînés et évalués sur Slovo afin de démontrer son potentiel pédagogique. Les données proposées ainsi que les modèles pré-entraînés sont mis à disposition publiquement.