Les 7 principaux cas d'usage et applications du suivi oculaire 3D
Les yeux sont le miroir de l'âme. Que ce soit vrai ou non, une chose est indéniable : nos yeux en disent long les uns sur les autres. Selon l'hypothèse de l'œil coopératif, l'œil humain aurait évolué vers une sclérotique blanche plus grande et plus lumineuse pour que nous communiquions mieux en suivant le regard des autres. En associant cette caractéristique humaine à de nouvelles technologies comme le suivi oculaire 3D, nous pouvons faire progresser encore notre façon de communiquer, et les machines qui nous entourent.
Reconnaissance vocale, détection de mouvement, commande tactile : autant d'éléments déjà intégrés aux appareils du quotidien. Il manque pourtant une pièce essentielle : regarder l'utilisateur dans les yeux et comprendre son attention, son intérêt et son engagement, comme le font naturellement les gens entre eux. Le suivi de l'attention change la donne.
L'arrivée du suivi oculaire 3D, c'est-à-dire l'utilisation de caméras grand public à capteur de profondeur pour suivre le regard, ouvre de nouvelles applications passionnantes pour l'interaction homme-machine.
Voici les principales applications du suivi oculaire 3D dans différents domaines :
1. Suivi de l'attention dans le commerce de détail
Plutôt que de demander à un panel présélectionné de porter des lunettes pour une étude de marché sur l'attention en rayon, au risque d'influencer son comportement, le suivi oculaire 3D permet de suivre le regard des passants de manière précise et non intrusive. En mesurant l'attention des clients, les distributeurs peuvent ensuite analyser la performance de leurs produits. Le suivi de l'attention fournit aux entreprises des données précieuses. Le suivi oculaire 3D peut produire des analyses de l'attention en rayon qui identifient le nombre de vues et les points focaux, sans calibration. Les instituts d'études peuvent ensuite s'appuyer sur ces enseignements pour proposer aux distributeurs des optimisations de leur approche commerciale et de l'expérience client. L'analyse du suivi oculaire renforcera l'avantage concurrentiel de votre entreprise.
2. Le suivi oculaire en robotique
Tous deux permettent de détecter et d'anticiper les intentions des personnes et l'attention qu'elles portent aux objets.
En robotique, le suivi du regard en 3D permet une interaction homme-robot plus naturelle et plus collaborative. Aujourd'hui, les robots ne savent pas évaluer avec précision le niveau d'engagement humain. Mais dotés d'une « paire d'yeux », des caméras à capteur de profondeur associées à un logiciel de suivi oculaire, ils peuvent calculer un vecteur de regard en 3D. Tous deux permettent de détecter, suivre et anticiper les intentions des personnes et l'attention qu'elles portent aux objets. Les cas d'usage concernent les robots collaboratifs, éducatifs, de service ou d'assistance, en particulier lorsqu'une grande amplitude de mouvement et une interaction avec des objets réels sont nécessaires.
Regardez la démonstration de ce projet de recherche sur un robot éducatif mené par le professeur Joakim Gustaffson du Royal Institute of Technology de Stockholm. Le capteur utilisé pour le suivi oculaire 3D est une caméra Intel RealSense placée devant un robot Furhat.
3. Le suivi oculaire dans l'automobile
Le suivi oculaire dans l'automobile rendra les routes plus sûres. Une zone de suivi limitée et la nécessité d'un dispositif multicapteur pour suivre le regard en 3D limitent l'usage des technologies actuelles de suivi oculaire dans les voitures. La reconnaissance du regard résoudra deux problèmes majeurs de l'interaction entre l'humain et la voiture.
Automobile : surveillance du conducteur et suivi oculaire
Selon l'European New Car Assessment Programme (NCAP), non seulement la surveillance du conducteur sera considérée comme une norme de « sécurité primaire » d'ici 2020, mais « l'évaluation portera sur la fiabilité et la précision avec lesquelles l'état du conducteur est détecté ». Détecter l'attention du conducteur pour le surveiller et permettre des transferts de contrôle coordonnés dans les voitures semi-autonomes deviendra donc indispensable. À l'avenir, le conducteur sera surveillé en permanence et son attention suivie par des caméras à capteur de profondeur. À partir des données de ces caméras, le logiciel de suivi vérifie l'attention du conducteur.
Copilote virtuel automobile
Les voitures sont des robots. Elles interagissent déjà avec le conducteur par commandes vocales et gestuelles. La détection et le suivi de l'attention, en revanche, ont pris du retard dans l'automobile. Un logiciel de suivi oculaire 3D pour l'automobile peut permettre à « l'assistant de bord qui voit » de détecter le regard du conducteur et des passagers vers les éléments du système d'infodivertissement, comme le tableau de bord, la console centrale et les rétroviseurs, mais aussi d'interagir naturellement avec les affichages tête haute en réalité augmentée, et même de permettre au copilote virtuel de détecter le regard porté sur des objets à l'extérieur de la voiture.
4. Appareils grand public
Les téléphones mobiles comme l'iPhone X ou le Xiaomi Mi8, et les ordinateurs portables équipés de caméras à capteur de profondeur orientées vers l'utilisateur, peuvent faire tourner un logiciel de suivi oculaire 3D sans eye tracker supplémentaire. La caméra à capteur de profondeur peut alors détecter l'attention portée à différentes zones de l'écran, et permettre éventuellement à l'utilisateur de naviguer en partie avec les yeux. Le suivi oculaire sur mobile améliorera considérablement l'expérience grâce à ce nouveau mode de saisie. Sur les PC portables gaming, le suivi du regard en 3D peut rendre le jeu plus immersif, pour interagir avec des avatars ou estomper les menus d'information hors du champ de vision afin d'alléger l'écran.
5. Technologies d'assistance
Des solutions logicielles sur mesure s'appuyant sur des caméras grand public à capteur de profondeur peuvent aider les personnes en situation de handicap à contrôler un ordinateur, les fonctions de la souris étant associées aux mouvements de tête, aux expressions du visage et au suivi du regard. Cette assistance renforcée leur permettrait de communiquer mieux et plus facilement. Les utilisateurs peuvent aussi guider un bras robotique d'assistance vers l'objet qui les intéresse, en réduisant au minimum le fastidieux pilotage au joystick. Dans la vidéo ci-dessous, Henny Admoni, professeure adjointe au Robotics Institute de Carnegie Mellon University, présente ses recherches sur la manière dont la reconnaissance du regard peut améliorer la coordination homme-robot.
6. Le suivi oculaire dans la publicité
Les annonceurs peuvent mieux analyser l'attention et la concentration des consommateurs face aux publicités extérieures grâce à une analyse par suivi oculaire 3D qui ne nécessite aucune calibration.
L'analyse d'audience peut indiquer le nombre de vues de la publicité, sa réception émotionnelle, le moment de la journée où l'attention est la plus forte et d'autres statistiques en temps réel utiles à l'annonceur.
7. Recherche comportementale
Les chercheurs utilisent le suivi oculaire pour étudier le comportement dans des troubles comme le TDAH et l'autisme, par exemple la façon dont les personnes consomment visuellement l'information. GazeSense est un outil de recherche, pas un dispositif de diagnostic.
Mais il est souvent difficile, surtout avec des enfants, de les maintenir dans la zone de suivi des eye trackers actuels, et parfois même impossible de suivre une procédure de calibration stricte. Le suivi oculaire 3D lève ces obstacles, avec une zone de suivi plus large, dans des positions de tête variées et extrêmes, et la possibilité d'un suivi sans calibration. Parmi les atouts du logiciel de suivi oculaire d'Eyeware : pas de lunettes et l'utilisation de caméras grand public à capteur de profondeur.