GesturePod : Permettre l'interaction gestuelle sur dispositif pour les utilisateurs de canne blanche

Les personnes utilisant un bâton blanc pour la navigation éprouvent des difficultés à accéder simultanément à des appareils tels que les smartphones. S'appuyant sur des recherches antérieures sur l'abandon des dispositifs spécialisés, nous explorons une nouvelle modalité d'interaction sans contact, permettant à une personne aveugle ou malvoyante d'effectuer des gestes avec son bâton blanc existant afin de déclencher des tâches sur son smartphone. Nous présentons GesturePod, un dispositif facile à intégrer qui s'attache à tout bâton blanc et détecte les gestes réalisés avec celui-ci. Grâce à GesturePod, l'utilisateur peut accomplir des tâches courantes sur son smartphone sans toucher l'appareil, ni même l'extraire de sa poche ou de son sac. Nous discutons des défis rencontrés dans la conception du dispositif ainsi que des choix de conception adoptés. Nous proposons une nouvelle chaîne de traitement par apprentissage automatique, efficace, pour former et déployer le modèle de reconnaissance de gestes. Une étude menée en laboratoire montre que GesturePod atteint une précision de reconnaissance de gestes de 92 %, permettant d'accomplir des tâches courantes sur smartphone plus rapidement. Une étude réalisée dans des environnements réels suggère que GesturePod constitue un outil prometteur pour améliorer l'accès aux smartphones des personnes ayant une déficience visuelle, notamment dans des scénarios extérieurs contraints.