Deux étudiants de Harvard ont récemment révélé comment la combinaison des lunettes intelligentes de Meta avec un logiciel de reconnaissance faciale peut révéler l’identité et les informations personnelles d’une personne en quelques secondes, selon un rapport d’Ashley Belanger pour Ars Technica.

Selon son rapport, AnhPhu Nguyen et Caine Ardayfio ont modifié une paire de lunettes intelligentes Ray-Ban Meta pour les intégrer à PimEyes, un moteur de reconnaissance faciale par image inversée, ainsi qu'à un modèle de langage étendu (LLM). Ce système peut extraire instantanément des données personnelles telles que des noms, des numéros de téléphone et des adresses à partir du Web. Nguyen a expliqué comment cette technologie, baptisée « I-XRAY », soulève des inquiétudes alarmantes en matière de confidentialité, avec la possibilité d'identifier des inconnus dans les lieux publics simplement en les regardant à travers les lunettes.

Sommes-nous prêts pour un monde où nos données sont exposées en un coup d'œil ? @CaineArdayfio et moi vous proposons une réponse pour vous protéger ici : https://t.co/LhxModhDpk pic.twitter.com/Oo35TxBNtD

– AnhPhu Nguyen (@AnhPhuNguyen1) 30 septembre 2024

Les étudiants ont mené des tests dans une station de métro, scannant les visages de voyageurs sans méfiance et accédant à des informations accessibles au public via des bases de données de recherche de personnes. Certains individus ont été trompés en pensant que les étudiants les connaissaient en se basant sur les informations personnelles qu’ils ont récupérées en quelques secondes. Ils ont décrit leur projet comme une démonstration de la facilité avec laquelle quelqu’un peut utiliser cette technologie à des fins malveillantes. « Un type pourrait simplement trouver l’adresse d’une fille dans le train et la suivre jusqu’à chez elle », a averti Nguyen.

I-XRAY combine les avancées récentes en matière de LLM et de reconnaissance faciale, permettant une extraction automatisée des données qui aurait auparavant nécessité beaucoup de temps et d’efforts. Les lunettes Ray-Ban de Meta (avec verres transparents) ont été choisies pour ce projet en raison de leur design discret, qui les fait ressembler à des lunettes ordinaires. Les étudiants ont même désactivé la lumière d’enregistrement des lunettes pour que le scan soit indétectable, soulignant encore davantage les risques.

Malgré cette découverte, Nguyen et Ardayfio ont souligné qu’ils n’avaient aucune intention de divulguer le code d’I-XRAY, expliquant que leur objectif était d’attirer l’attention sur les menaces croissantes pesant sur la vie privée. Ils ont encouragé les individus à refuser les moteurs de recherche invasifs tels que PimEyes pour protéger leurs données.

Si les lois sur la protection de la vie privée dans l’Union européenne exigent le consentement pour la collecte de données de reconnaissance faciale, de telles protections n’existent pas aux États-Unis, où des acteurs malveillants pourraient exploiter cette technologie. Cependant, les étudiants ont souligné que leur projet n’était pas unique : des technologies similaires sont en cours de développement. Par exemple, Clearview AI, une entreprise spécialisée dans la reconnaissance faciale pour les forces de l’ordre, aurait étudié l’utilisation de lunettes intelligentes pour la numérisation des visages. Cette idée a suscité de vives inquiétudes, compte tenu des pratiques controversées de Clearview et de son objectif d’inclure presque tous les visages humains dans sa base de données.

Nguyen et Ardayfio ont fourni des instructions sur la suppression des informations personnelles des moteurs de recherche inversée de visages, comme PimEyes et Facecheck ID, et des bases de données de recherche de personnes comme FastPeopleSearch, CheckThem et Instant Checkmate. Pourtant, leurs tests ont montré que même le fait de se désinscrire ne garantissait pas l’anonymat, car certains sujets étaient toujours facilement identifiables. Malgré leurs avertissements, la réalité inquiétante est que des technologies comme I-XRAY pourraient bientôt être à la portée de toute personne disposant des bons outils.

Image en vedette via Pixabay