Les chercheurs mettent au point de nouveaux moyens de suivre et d’analyser chacun de vos regards – et les grandes plateformes technologiques comme Facebook cherchent déjà à faire les leurs.
Mark Zuckerberg a clairement indiqué que son entreprise se consacre entièrement à sa vision des espaces sociaux virtuels. Ce n’est pas la première fois qu’un magnat de la technologie annonce avec assurance cette renaissance de la réalité virtuelle, où les gens sont censés habiter des avatars en ligne et dépenser de l’argent du monde réel pour des meubles numériques. Mais cette fois, les progrès de l’apprentissage automatique promettent de donner aux entreprises technologiques l’accès à des catégories entières de données extrêmement intimes, y compris des données biométriques comme les mouvements oculaires, qui peuvent potentiellement révéler des détails très sensibles sur nos préférences et notre état d’esprit.
Dans un nouvel article, des chercheurs de l’université Duke décrivent un système appelé EyeSyn qui rend l’analyse des mouvements oculaires d’une personne plus facile que jamais. Cependant, au lieu de collecter d’énormes quantités de données directement à partir des yeux humains, les chercheurs ont formé un ensemble d' »yeux virtuels » qui imitent les mouvements réels des yeux. Le système est alimenté par des modèles de mouvements oculaires typiques – comme la lecture d’un texte, le visionnage d’une vidéo ou la conversation avec une autre personne – et apprend ensuite à faire correspondre et à reconnaître ces modèles chez des humains réels. En d’autres termes, le système utilise des données d’exemple pour deviner ce que fait ou regarde une personne en se basant uniquement sur ses mouvements oculaires.
Selon les chercheurs, ce processus élimine certains des problèmes de confidentialité associés à la capture de grandes quantités de données biométriques pour l’entraînement des algorithmes. Au lieu d’utiliser d’énormes ensembles de données dans le nuage, remplis de mouvements oculaires humains, le système EyeSyn est formé pour reconnaître les modèles oculaires à partir des modèles chargés sur un appareil local. Cela rend également le système moins gourmand en ressources, de sorte que les petits développeurs peuvent rendre des environnements virtuels sans disposer d’une énorme puissance de calcul.
Mais les chercheurs admettent également que le suivi des yeux peut être utilisé pour créer des systèmes prédictifs qui déterminent ce qui attire l’attention d’une personne – et potentiellement, déduire des détails profondément privés qu’elle n’a jamais eu l’intention de révéler. « La priorité que vous accordez à votre vision en dit long sur votre personnalité », a écrit Maria Gorlatova, l’un des auteurs de l’étude, dans un communiqué publié par l’université Duke. « Cela peut révéler par inadvertance des préjugés sexuels et raciaux, des intérêts que nous ne voulons pas que les autres connaissent, et des informations que nous ne connaissons peut-être même pas sur nous-mêmes. »
Une précédente étude de 2019 va plus loin, concluant que le suivi du regard d’une personne « peut implicitement contenir des informations sur l’identité biométrique d’un utilisateur, son sexe, son âge, son origine ethnique, son poids corporel, ses traits de personnalité, ses habitudes de consommation de drogues, son état émotionnel, ses compétences et ses capacités, ses peurs, ses intérêts et ses préférences sexuelles. » Dans d’autres types de systèmes algorithmiques comme la reconnaissance des émotions, de nombreux experts en apprentissage automatique sont extrêmement sceptiques quant à l’exactitude de ces prédictions. Mais cela ne va probablement pas empêcher les entreprises technologiques de les déployer de toute façon – en particulier les plateformes comme Facebook, qui gagnent de l’argent en surveillant et en prédisant le comportement des utilisateurs afin de leur montrer des publicités.
« En ce qui concerne Facebook/Meta, ils ont depuis longtemps épuisé l’hypothèse des opérations de bonne foi, en particulier en ce qui concerne la vie privée », a déclaré à Motherboard le Dr Chris Gilliard, professeur au Macomb Community College qui étudie la discrimination algorithmique. « Quand je pense à la poussée de Meta pour faire du « métavers » un endroit où les gens vivent, travaillent et jouent, il y a de nombreuses façons infâmes et franchement discriminatoires dont cela est susceptible de se jouer. »
Les chercheurs à l’origine d’EyeSyn ne travaillent pas avec Facebook et affirment qu’ils espèrent ouvrir la technologie aux petites entreprises qui entrent sur le marché de la RV. Lors d’un entretien avec Motherboard, Mme Gorlatova a souligné que l’eye tracking se distingue des autres technologies qui prédisent les émotions en observant l’ensemble du visage ; certaines de ses utilisations les plus anciennes concernent les tests de produits, les études psychologiques et les applications médicales, par exemple. Mais plus récemment, les entreprises technologiques se sont intéressées de nouveau au développement de cette technologie pour tenter de mesurer des éléments tels que l’activité cognitive en observant des facteurs comme les mouvements des yeux, le clignement des yeux et la dilatation de la pupille.
Après avoir acheté la société de réalité virtuelle Oculus en 2014, Facebook a déclaré qu’il n’avait pas l’intention d’utiliser les données biométriques et les capteurs de mouvement pour influencer le comportement des utilisateurs ou vendre des publicités. Mais plus récemment, Meta, la société mère de Facebook, s’est vu accorder plusieurs brevets liés au suivi des yeux et aux capteurs biométriques, et semble avoir l’intention d’utiliser ces types de mesures pour renforcer sa plateforme publicitaire dans le métavers.
Mme Gorlatova souligne que la protection de la vie privée doit être intégrée dès le départ dans les technologies de suivi des yeux. Plus précisément, les données relatives aux mouvements oculaires devraient être traitées localement sur les appareils des consommateurs, afin que les informations biométriques sensibles ne tombent jamais entre les mains de Facebook ou d’un autre tiers.
