Deux étudiants de Harvard piratent les lunettes de Meta pour reconnaître les gens dans la rue

Intelligence artificielle et lunettes connectées, un cocktail risqué. Deux étudiants de Harvard, AnhPhu Nguyen et Caine Ardayfio, ont travaillé sur un projet appelé I-XRAY, combinant les lunettes intelligentes Ray-Ban de Meta avec des technologies de reconnaissance faciale. L’objectif est d’identifier les individus dans l’espace public et de récupérer leurs données personnelles en temps réel. Ils ont ensuite détaillé leur travail sur le réseau social X, fin septembre 2024.

Les deux étudiants se sont promenés sur leur campus et dans la ville de Boston, prenant des captures d’écran des passants rencontrés. Leur vidéo peut prêter à confusion car elle sous-entend que les lunettes donnent l’information directement sur les verres. Cependant, la monture est uniquement connectée à un programme d’intelligence artificielle qui reçoit les photos prises par les Ray-Ban.

Les deux jeunes ingénieurs s’approchaient des gens au hasard, leur fournissant des informations sur leur métier ou leurs activités sportives, après les avoir captés quelques secondes auparavant avec les lunettes de Meta.

Des lunettes connectées à une plateforme de reconnaissance faciale

Leur logiciel exploite PimEyes, une plateforme de reconnaissance faciale en ligne, qui recherche sur le Web des correspondances avec des photos disponibles en ligne. Une fois le visage détecté par les lunettes, il est envoyé à PimEyes. Le moteur de recherche se charge alors de faire remonter tous les sites sur lesquels la personne apparaît.

Les créateurs d’I-XRAY ont déclaré à 404 Media qu’ils ne divulgueraient pas le code de leur appareil, leur intention étant de sensibiliser à l’utilisation dangereuse des technologies de reconnaissance faciale. Ils soulignent l’importance de supprimer vos données des moteurs de recherche faciale comme PimEyes et des courtiers en données.

Reste à savoir si ce message parviendra aux oreilles de Mark Zuckerberg, qui a récemment dévoilé un projet de lunettes connectées baptisé Orion, qu’il qualifie de révolution technologique.