HyperAIHyperAI

Command Palette

Search for a command to run...

Gaze360 : Estimation de l'attention visuelle sans contrainte physique dans des environnements naturels

Petr Kellnhofer Adria Recasens Simon Stent Wojciech Matusik Antonio Torralba

Résumé

Comprendre où les personnes regardent constitue un indice social informatif. Dans ce travail, nous présentons Gaze360, un ensemble de données à grande échelle et une méthode pour une estimation robuste de l’orientation du regard en 3D à partir d’images non contraintes. Notre ensemble de données comprend 238 sujets, dans des environnements intérieurs et extérieurs, avec des annotations de regard en 3D couvrant une large gamme d’orientations de tête et de distances. Il s’agit du plus grand ensemble de données publiquement disponible de ce type, tant en nombre de sujets qu’en diversité, rendu possible par une méthode de collecte simple et efficace. Notre modèle de regard en 3D étend les modèles existants en intégrant des informations temporelles et en produisant directement une estimation de l’incertitude du regard. Nous démontrons les avantages de notre modèle à travers une étude d’ablation, et montrons sa capacité de généralisation via une évaluation croisée sur d’autres jeux de données récents de référence pour le regard. Nous proposons également une approche simple auto-supervisée pour améliorer l’adaptation de domaine entre jeux de données. Enfin, nous illustrons une application de notre modèle pour estimer l’attention des clients dans un contexte de supermarché. Nos jeux de données et modèles sont disponibles à l’adresse http://gaze360.csail.mit.edu.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Gaze360 : Estimation de l'attention visuelle sans contrainte physique dans des environnements naturels | Articles | HyperAI