Principales destacados
- Cloudflare bloqueará, por defecto, rastreadores de IA que mezclan búsqueda, entrenamiento de modelos y agentes inteligentes.
- La nueva política entra en vigor el 15 de septiembre de 2026 y busca ampliar el control de los editores sobre sus contenidos.
- La empresa también expande su sistema de monetización, permitiendo que los publishers reciban cuando su contenido genere valor para plataformas de inteligencia artificial.
Cloudflare anunció un cambio que puede alterar la forma en que las empresas de inteligencia artificial acceden a los contenidos publicados en internet.
A partir del 15 de septiembre de 2026, la compañía comenzará a bloquear automáticamente rastreadores clasificados como de «uso mixto» en páginas que muestran anuncios. Estos bots son aquellos utilizados al mismo tiempo para motores de búsqueda, entrenamiento de modelos de IA y funcionamiento de agentes inteligentes.
La iniciativa representa un paso más de la empresa en su intento de crear un modelo considerado más sostenible para la relación entre plataformas de inteligencia artificial y productores de contenido.
Según Cloudflare, muchos propietarios de sitios desean seguir apareciendo en motores de búsqueda e incluso en servicios de IA, pero no quieren que su trabajo sea utilizado gratuitamente para entrenar modelos comerciales.
Cloudflare quiere separar la búsqueda tradicional del uso para IA
De acuerdo con la empresa, diversos rastreadores actualmente desempeñan múltiples funciones, lo que dificulta que los editores decidan exactamente cómo podrá utilizarse su contenido. Con la nueva política, los bots que mezclan búsqueda web, entrenamiento de IA y agentes autónomos serán bloqueados automáticamente, salvo que el propietario del sitio opte por permitir ese acceso.
El cambio se aplicará a los nuevos clientes de Cloudflare, a los nuevos sitios creados por clientes actuales y también a todos los usuarios del plan gratuito. En la práctica, la empresa pretende incentivar a los desarrolladores de IA a utilizar rastreadores separados para cada finalidad, ofreciendo mayor transparencia a los propietarios de sitios.
Google entra en el debate sobre el uso de contenido
Sin mencionar directamente a Google por su nombre, Cloudflare afirmó que «el mayor motor de búsqueda del mundo» tiene acceso a una cantidad mucho mayor de información que otras empresas de IA.
Según la compañía, esto ocurre porque muchos administradores de sitios encuentran dificultades para mantenerse visibles en los resultados de búsqueda sin, al mismo tiempo, permitir el uso de sus contenidos en aplicaciones de inteligencia artificial.
Google ya ha respondido a críticas similares anteriormente. La empresa destaca que ofrece Google Extended, una herramienta que permite a los sitios impedir que sus contenidos sean utilizados en el entrenamiento de modelos y productos de IA, como Gemini Apps y Vertex AI, sin afectar su presencia en la Búsqueda de Google. Sin embargo, Googlebot sigue siendo utilizado tanto para la indexación tradicional como para funciones basadas en IA, como AI Overviews y AI Mode.
Para Matthew Prince, cofundador y CEO de Cloudflare, el momento exige nuevas reglas para preservar el ecosistema de internet. Según él, el tráfico generado por bots ya ha superado al de los usuarios humanos, un hito que la empresa esperaba observar recién el próximo año.
Nuevo modelo permite que los publishers sean remunerados
Además del bloqueo de rastreadores, Cloudflare también está ampliando su estrategia de monetización para creadores de contenido. El sistema conocido como Pay Per Crawl, que cobraba a las empresas de IA por el rastreo de páginas, evolucionará hacia el modelo Pay Per Use.
En este nuevo formato, los publishers podrán recibir pagos cada vez que sus contenidos efectivamente generen valor dentro de plataformas de inteligencia artificial, y no solo cuando sean accedidos por los rastreadores.
Según Cloudflare, la medida también puede reducir el consumo innecesario de recursos de los sitios. Datos internos de la empresa indican que más de la mitad del tráfico generado por rastreadores de IA corresponde a la actualización repetida de páginas que ni siquiera han sufrido cambios.
Inicialmente, la empresa implementará el nuevo modelo en asociación con Ceramic.ai y You.com. Cuando un publisher se adhiera al programa, será remunerado cada vez que su contenido aparezca en los resultados de Ceramic o cuando información premium sea utilizada por You.com. Se espera que otras empresas de inteligencia artificial adopten modelos similares en los próximos meses.
La iniciativa refuerza un debate cada vez más presente en el sector: cómo equilibrar el avance acelerado de la inteligencia artificial con la remuneración justa de quienes producen el contenido que alimenta estos sistemas.
