Mientras los raspadores de datos de IA minan los ingresos de los sitios web, algunos contraatacan

Un enjambre de «rastreadores» de IA corre desenfrenadamente en Internet, rastreando miles de millones de sitios web en busca de datos para alimentar algoritmos en empresas tecnológicas líderes, todo sin permiso ni pago, revolucionando la economía en línea.

Antes del auge de los chatbots de IA, los sitios web permitían a los motores de búsqueda acceder a su contenido a cambio de una mayor visibilidad, un sistema que los recompensaba con tráfico e ingresos publicitarios.

Pero el rápido desarrollo de la IA generativa ha permitido a gigantes tecnológicos como Google y OpenAI recopilar información para sus chatbots con rastreadores web, sin que los humanos tengan que visitar los sitios originales.

Los productores de contenidos tradicionales, como los medios de comunicación, están siendo superados por los rastreadores de IA, que han recortado sus operaciones en línea y sus ingresos publicitarios.

«Los sitios que daban a los bots acceso a su contenido solían conseguir lectores a cambio», dijo Kurt Muehmel, jefe de estrategia de IA en la firma de gestión de datos Dataiku.

Pero la llegada de la IA generativa «rompe completamente» ese modelo, afirmó a la AFP.

El tráfico humano de Internet en Wikipedia cayó un ocho por ciento entre 2024 y 2025 debido a un aumento en los resúmenes de los motores de búsqueda de inteligencia artificial, informó la enciclopedia en línea el mes pasado.

«La tensión fundamental es que el nuevo negocio de Internet impulsado por la IA no genera tráfico», dijo Matthew Prince, director ejecutivo de Cloudflare, un proveedor estadounidense de servicios de Internet.

‘Prohibido el paso’

Cloudflare, que procesa más del 20% de todo el tráfico de Internet, anunció este verano una nueva medida destinada a impedir que los rastreadores de inteligencia artificial accedan al contenido sin pago o permiso de los propietarios de sitios web.

«Es básicamente como poner una señal de límite de velocidad o de prohibición de paso», dijo Prince a la AFP al margen de la Cumbre Web en Lisboa.

«Los robots que se portan mal pueden superarlo, pero podemos rastrearlo… Con el tiempo, podemos reforzar estos controles de una manera que estemos seguros de que las empresas de inteligencia artificial no podrán superar».

La medida, que se aplica a más de 10 millones de sitios web, ya ha «atraído la atención de los gigantes de la inteligencia artificial», añadió.

A menor escala, la startup estadounidense TollBit proporciona a los editores de noticias en línea herramientas para bloquear, monitorear y monetizar el tráfico de rastreadores de IA.

«Internet es una autopista», afirmó el director general y cofundador Toshit Panigrahi, quien describió la empresa como una «peaje en Internet».

TollBit trabaja con más de 5.600 sitios, incluidos US Today, la revista Time y Associated Press, lo que permite a los medios de comunicación establecer sus propias tarifas de acceso a su contenido.

Los análisis son gratuitos para los editores, pero a las empresas de inteligencia artificial se les cobra una «tarifa de transacción por cada contenido al que acceden».

Pero para Muehmel, la toma de control en línea por parte de los rastreadores de inteligencia artificial no puede resolverse sólo con «medidas parciales o por parte de una empresa individual».

«Esta es una evolución de toda la economía de Internet, que llevará años», afirmó.

Si el enjambre de robots continúa deambulando libremente en línea, «todos los incentivos para la creación de contenido desaparecerán», dijo Prince.

«Eso sería una pérdida, no sólo para nosotros, los humanos, que queremos consumirlo, sino también para las empresas de inteligencia artificial que necesitan contenido original para entrenar sus sistemas».

© 2025 AFP