La empresa obligará a separar los rastreadores de búsqueda de los utilizados para entrenar modelos y agentes de IA. El cambio podría redefinir cómo Google, OpenAI y otros acceden al contenido de los medios y creadores.
Cloudflare acaba de lanzar uno de los movimientos más importantes en la disputa entre medios de comunicación, creadores de contenido y compañías de inteligencia artificial. La empresa anunció que, a partir del 15 de septiembre de 2026, bloqueará por defecto a los rastreadores de IA de “uso mixto” en sitios que muestren publicidad.
La decisión apunta directamente a los bots que combinan tareas de búsqueda tradicional, entrenamiento de modelos y servicios de agentes de IA en un mismo rastreador. Según Cloudflare, estos bots seguirán siendo bloqueados automáticamente salvo que el propietario del sitio modifique manualmente la configuración.
La medida afectará a nuevos clientes de Cloudflare, nuevos sitios creados por clientes existentes y todos los clientes gratuitos actuales, y podría alterar la forma en que los proveedores de IA acceden al contenido de la web para entrenar modelos y alimentar asistentes inteligentes.
Un mensaje directo a Google y al resto de la industria
En su anuncio, Cloudflare evitó mencionar explícitamente a Google, pero sí hizo referencia al “mayor motor de búsqueda del mundo”, al que atribuyó acceso a “aproximadamente el doble de información” que otras compañías de IA.
El argumento de la empresa es que muchos editores desean aparecer en los resultados de búsqueda y también en servicios de IA, pero no quieren que su propiedad intelectual sea utilizada gratuitamente para entrenar modelos.
Google ha respondido anteriormente que ofrece Google Extended, una herramienta que permite a los sitios excluir su contenido del entrenamiento de IA y de productos como Gemini sin perder presencia en Google Search. Sin embargo, el principal rastreador de la compañía, Googlebot, sigue siendo utilizado tanto para la búsqueda tradicional como para funciones impulsadas por IA, como AI Overviews y AI Mode.
La web ya tiene más tráfico de bots que de humanos
El CEO y cofundador de Cloudflare, Matthew Prince, justificó el cambio con un dato que marca un punto de inflexión en internet.
“Ahora que la mayoría del tráfico en Internet ya no es humano, debemos ir más lejos y actuar más rápido para que pueda surgir un ecosistema sostenible”.
Según la compañía, los bots ya superaron al tráfico humano antes de lo previsto, una situación que originalmente se esperaba para 2027.
Del “Pay Per Crawl” al “Pay Per Use”
Cloudflare no solo quiere limitar el acceso gratuito al contenido. También busca crear un modelo económico para que los editores puedan monetizar el uso de su información por parte de las IA.
En los últimos años la empresa lanzó Pay Per Crawl, un sistema que permite cobrar a los bots de IA por rastrear páginas web. Ahora evolucionará hacia Pay Per Use, donde los editores podrán cobrar cuando su contenido genere valor efectivo dentro de un servicio de IA.
Los primeros socios del programa son:
IA Search
Ceramic.ai
Los editores recibirán pagos cuando su contenido aparezca en los resultados de búsqueda generados por IA.
Contenido premium
You.com
Los medios cobrarán cuando la plataforma acceda a artículos o contenido premium.
Cloudflare aseguró que otras compañías de IA podrán adaptar el esquema a sus propios modelos de negocio.
Menos costos para los medios
Además del aspecto económico, la empresa sostiene que la medida ayudará a reducir el consumo innecesario de ancho de banda y capacidad de cómputo de los editores.
Los datos internos de Cloudflare indican que más del 50% del tráfico generado por rastreadores de IA se dedica a volver a descargar páginas que no cambiaron, lo que implica costos adicionales para los sitios web sin aportar nuevo valor.
Qué significa para la industria de la IA
La decisión llega en un momento de creciente tensión entre los desarrolladores de modelos de IA y los productores de contenido.
Empresas como OpenAI, Anthropic, Google y otros laboratorios dependen de enormes volúmenes de información de la web para entrenar modelos y ofrecer servicios de búsqueda y asistentes inteligentes.
Si más editores adoptan las herramientas de Cloudflare, las compañías de IA podrían verse obligadas a negociar licencias de contenido, pagar por el acceso o desarrollar rastreadores separados para búsqueda y entrenamiento.
En otras palabras, Cloudflare está intentando imponer una nueva regla de la economía digital: si una IA obtiene valor del contenido de un medio, ese medio debe poder participar de ese valor.
El 15 de septiembre será la primera gran prueba para saber si la industria de la inteligencia artificial acepta esa nueva lógica o si se abre una nueva batalla por el control del contenido en la era de los agentes autónomos.