Et si votre smartphone vous suivait du regard?

Toutes les deux semaines, Guillaume Besson (expert AI For Tomorrow et Senior Data Consultant chez Quantmetry) explore pour AI For Tomorrow des champs d’application AI For Good.


Source : https://arxiv.org/pdf/2010.05123.pdf



L’oculométrie (ou eye-tracking) est une technologie permettant de suivre ce que l’utilisateur regarde sur un écran en suivant un ensemble d’éléments, tels que le mouvement des yeux ou la dilatation des pupilles.


Cette technologie a de nombreuses applications pratiques, en particulier pour aider les personnes atteintes de handicaps à se servir d’un ordinateur.

Les dispositifs d’oculométrie ne sont pas une nouveauté, les premiers datant de 1931, mais cette technologie souffre encore de deux grandes contraintes : le coût et l’accessibilité du matériel spécifique utilisé.


Afin de démocratiser cette technologie, Microsoft a publié une étude décrivant un système d’oculométrie “hardware-agnostic”, c’est-à-dire capable de fonctionner sur tous types de matériels, y compris du matériel grand public, achetable par n’importe qui.


En utilisant un réseau de neurones convolutifs profonds, déployé sur un terminal avec une caméra RGB standard, les chercheurs parviennent à un niveau de précision très élevé, de l’ordre du millimètre.


Confiants dans la portée de leurs travaux, les chercheurs annoncent que cette technologie permettra de “contrôler par le regard n’importe quel ordinateur, smartphone ou tablette” dans à peine quelques années.



Lire sur notre Medium


Guillaume Besson,

Expert AI For Tomorrow

Senior Data Consultant chez Quantmetry