Los estudiantes agregan reconocimiento facial a las metagafas inteligentes para identificar extraños en tiempo real

Dos estudiantes de la Universidad de Harvard modificaron un conjunto de gafas inteligentes Meta Ray-Ban para agregar tecnología de reconocimiento facial basada en inteligencia artificial, y el resultado es un dispositivo portátil capaz de identificar personas en tiempo real, según un informe de 404 Medios.

Las Meta Glasses modificadas pueden usar la cámara para escanear la cara de un extraño y obtener su nombre, y también hay una función para extraer información como dirección de casa, número de teléfono y miembros de la familia de sitios de Internet que almacenan ese tipo de datos.

AnhPhu Nguyen y Caine Ardayfio, los creadores, mostraron las gafas en público. Ardayfio se acercó a una total desconocida, escaneó su rostro, obtuvo su nombre y afiliaciones, y luego fingió que la conocía de una de las organizaciones que surgieron en una búsqueda sobre ella. En una segunda demostración, Nguyen identificó a un hombre al azar e inició una conversación, fingiendo haber leído su trabajo basándose en lo que aparecían las gafas.

Las Meta Glasses se configuraron para transmitir video directamente a Instagram, y un programa de computadora monitorea la transmisión. La IA determina cuándo se detecta una cara y luego se realiza una búsqueda en Internet para encontrar más fotografías de la persona. A partir de ahí, se utilizan artículos en línea, bases de datos de registro de votantes y otra información pública para descubrir un nombre, número de teléfono, dirección y nombres de familiares. Todo sucede en un par de minutos y se envía a una aplicación de teléfono inteligente.

Se identificaron decenas de estudiantes de Harvard y nunca se dieron cuenta de que se habían utilizado escáneres faciales de IA para descubrir sus nombres e información sobre ellos. Nguyen dijo eso El proyecto tiene como objetivo crear conciencia sobre lo que se puede hacer con la tecnología de consumo actual, los motores de búsqueda facial, los LLM y las bases de datos públicas. Los dos creadores no tienen planes de lanzar ningún tipo de producto o código.

Nguyen y Ardayfio eligieron las gafas Meta Ray-Ban porque «parecen casi indistinguibles de las gafas normales», lo que las hace ideales para la captura de imágenes subrepticia. Se utilizó el reconocimiento facial inverso para hacer coincidir rostros con imágenes disponibles públicamente, y PimEyes, un motor de búsqueda de reconocimiento facial, fue identificado como la forma «más efectiva» de encontrar personas. Se utilizó un LLM para buscar detalles sobre una persona en la web y FastPeopleSearch proporcionó información adicional. Toda la configuración es automática gracias a los LLM.

Las gafas Ray-Ban de Meta tienen un diseño simple y se centran principalmente en tomar imágenes, pero incluso ese hardware limitado es suficiente para generar información detallada sobre una persona casi al instante. Con un procesador más rápido, capacidades de IA en el dispositivo, mejor tecnología de cámara y realidad aumentada, los productos futuros podrían hacer aún más.

En respuesta al informe, Meta dijo 404 Medios que el reconocimiento facial PimEyes se puede utilizar con cualquier cámara, y no es algo que «sólo sea posible gracias a Meta Ray-Ban». Eso es cierto, pero los Meta Ray-Ban parecen un par de anteojos estándar y muchas personas no se dan cuenta de cuándo se están usando los anteojos para tomar fotografías. PimEyes dijo que el informe le pareció «bastante sorprendente» porque su motor de búsqueda «no está diseñado para identificar personas, ni directa ni indirectamente».