HyperAIHyperAI

Command Palette

Search for a command to run...

il y a 4 mois

RT-BENE : Un jeu de données et des références pour l'estimation en temps réel des clignements d'yeux dans des environnements naturels

{Yiannis Demiris Kévin Cortacero Tobias Fischer}

RT-BENE : Un jeu de données et des références pour l'estimation en temps réel des clignements d'yeux dans des environnements naturels

Résumé

Ces dernières années, les méthodes d’estimation du regard ont connu des progrès considérables, portées par un large éventail d’applications, notamment l’interaction homme-robot, l’estimation de l’attention visuelle et le rendu foveal pour les casques de réalité virtuelle. Toutefois, de nombreuses approches d’estimation du regard supposent généralement que les yeux du sujet sont ouverts ; en cas de yeux fermés, ces méthodes produisent des estimations irrégulières du regard. Dans ce travail, nous remettons en question cette hypothèse en introduisant tout d’abord un nouveau jeu de données open source, annoté pour l’ouverture des yeux, comprenant plus de 200 000 images d’yeux, dont plus de 10 000 présentant des yeux fermés. Nous proposons également des méthodes de référence basées sur des réseaux de neurones convolutifs, permettant la détection des clignements. À l’issue d’expérimentations étendues, nous montrons que les méthodes proposées obtiennent de bons résultats en termes de précision et de rappel. Nous intégrons par la suite nos méthodes de référence RT-BENE dans le cadre récent RT-GENE d’estimation du regard, où elles permettent une inférence en temps réel de l’état d’ouverture des yeux. Nous soutenons que notre travail bénéficiera à la fois aux méthodes d’estimation du regard et aux méthodes de détection des clignements, et qu’il constitue une étape vers une unification de ces deux approches.

Benchmarks

BenchmarkMéthodologieMétriques
blink-estimation-on-eyeblink8DenseNet 121 Ensemble
F1: 0.976
blink-estimation-on-researcher-s-nightDenseNet 121 Ensemble
F1: 0.913
blink-estimation-on-rt-beneDenseNet 121 Ensemble
F1: 0.721

Construire l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec du co-codage IA gratuit, un environnement prêt à l'emploi et les meilleurs prix GPU.

Co-codage IA
GPU prêts à utiliser
Meilleurs prix
Commencer

Hyper Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
RT-BENE : Un jeu de données et des références pour l'estimation en temps réel des clignements d'yeux dans des environnements naturels | Articles de recherche | HyperAI