Cloudflare bloqueará por defecto los rastreadores mixtos de IA en webs con anuncios desde septiembre

Surgen avances clave en el escenario mundial. Cloudflare ha anunciado medidas para frenar el uso de rastreadores mixtos en los sitios web y, a partir del 15 de septiembre, la configuración predeterminada permitirá la búsqueda, pero bloqueará el entrenamiento y el uso de agentes en las páginas que contengan anuncios. La compañía ha compartido su intención de igualar las condiciones entre las empresas de IA, que están "redefiniendo lo que significa ser visible en una era agéntica", y las empresas de búsqueda tradicionales. Esto se debe a que, en un momento en el que ya hay más tráfico de bots en internet que de humanos, Cloudflare ha puesto sobre la mesa cómo la inteligencia artificial (IA) se está convirtiendo en la nueva interfaz para acceder a la información y realizar compras en línea, lo que "cambia las reglas sobre cómo se descubre el contenido", como ha explicado en un comunicado en su web.

Hasta ahora, el tráfico web era el indicativo de si los usuarios veían anuncios de un sitio web o pagaban por sus suscripciones, sin embargo, con los modelos de IA, que visitan los sitios web en nombre de los usuarios, el panorama está cambiando. "La mayoría de los propietarios de sitios web quieren su contenido en sistemas de IA. Pero las empresas que se basan en la publicidad o en las suscripciones se ven amenazadas por los sistemas de IA que se entrenan con su contenido sin ofrecerles ninguna compensación", ha aclarado la compañía, que pretende equilibrar esta relación de forma justa para los sitios web y las empresas de IA.

Los detalles

"Creemos que, si eres una empresa que quiere que su contenido forme parte de los sistemas de IA, deberíamos hacer que el proceso sea lo más sencillo y eficiente posible. Pero si eres una empresa que no quiere eso, deberías disponer de las herramientas necesarias para restringir el acceso de la IA", ha apostillado. En este sentido, ha anunciado nuevas clasificaciones predeterminadas, análisis mejorados para los clientes y búsquedas con IA optimizadas para asegurar que los creadores "reciben una compensación" cuando su contenido sirva de base para una respuesta.

CLASIFICACIONES PARA BLOQUEAR RASTREADORES WEB MIXTOSEstas nuevas clasificaciones se basan en funciones para ayudar a los propietarios de sitios web y a las empresas de IA a optimizar la visibilidad, eficiencia y la monetización. Concretamente, bloquearán de forma predeterminada los rastreadores web de uso mixto. Esto es, rastreadores que indexan sitios web para motores de búsqueda y, al mismo tiempo, actúan como agentes y entrenadores de IA.

Esta decisión se debe a que los rastreadores mixtos perjudican tanto a los propietarios de sitios web como a las empresas de IA transparentes -las que separan y etiquetan claramente a sus bots según su finalidad-, ya que mezclan la búsqueda, el uso de agentes y el entrenamiento sin ofrecer compensación a nadie. "Esto obliga a los propietarios de contenido a elegir entre ser visibles en una era agéntica y regalar sus contenidos más valiosos sin recibir a cambio ninguna compensación". Igualmente, los rastreadores mixtos que no permitan a los propietarios de los sitios web elegir entre la búsqueda, el uso de agentes y el entrenamiento "serán bloqueados en todas las páginas con anuncios", ha sentenciado la compañía.

Qué dicen los expertos

Estas clasificaciones se unen a las herramientas anunciadas el pasado año para gestionar y monetizar el acceso de los bots de IA a las webs, que ahora deben "ir más allá y actuar más rápido" para cerciorar un ecosistema sostenible. Con todo, Cloudflare ha aclarado que estas medidas se comenzará a aplicar el 15 de septiembre de este año para todos los usuarios que utilicen la versión gratuita y que no hayan modificado su configuración previamente. La compañía también ha anunciado que lanzará un nuevo panel de control para contenido monetizado llamado Attribution Business Insight, con mejoras para evitar la asimetría de datos y, de esta forma, impedir que los propietarios de contenido "negocien a ciegas".

Siguiendo esta línea, también ha renovado su herramienta de pago por rastreo, diseñada para que los creadores puedan cobrar a las empresas de IA por rastrear su contenido. Ahora, esta opción se ha transformado a un modelo de pago por uso, para que los creadores cobren cuando su contenido "realmente genere valor", no solo cuando se recupere.

El desarrollo ha despertado una amplia atención internacional, con los círculos diplomáticos siguiéndolo de cerca.