Cloudflare bloqueará rastreadores de IA que no paguen por el contenido que usan
Desde el 15 de setiembre, los crawlers mixtos quedarán bloqueados por defecto en sitios con publicidad, según anunció la empresa.
02.07.2026 07:59
Cloudflare, la empresa que gestiona la seguridad y el tráfico de una gran parte de los sitios web del mundo, acaba de fijarle un ultimátum a las compañías de inteligencia artificial: separen sus rastreadores (los programas que recorren la web para recopilar información) según el uso que les dan, o van a quedar bloqueados por defecto.
La fecha límite es el 15 de setiembre de 2026. A partir de ese día, según informó TechCrunch, los llamados crawlers de "uso mixto" —es decir, los que mezclan búsqueda tradicional, agentes de IA y entrenamiento de modelos en un mismo bot— quedarán bloqueados automáticamente en todos los sitios que alojan publicidad. Eso afecta a los nuevos clientes de Cloudflare, a los sitios nuevos de clientes existentes y a todos los clientes del plan gratuito.
La lógica detrás del cambio es simple: la mayoría de los dueños de sitios web quieren que su contenido aparezca en buscadores y hasta en servicios de IA, pero no quieren que su propiedad intelectual sea usada sin ningún tipo de compensación. Cloudflare apunta directamente al "motor de búsqueda más grande del mundo" —una referencia clara a Google, según TechCrunch— señalando que esa empresa accede a aproximadamente el doble de información que otras compañías de IA, porque hace difícil que los sitios sigan siendo descubribles sin que su contenido sea usado para entrenar modelos.
Google, por su parte, ya respondió a críticas similares en el pasado: la compañía ofrece un bot llamado Google Extended que permite a los sitios web excluirse del uso de su contenido para entrenamiento de productos como Gemini o Vertex API, sin que eso afecte su posición en los resultados de búsqueda. Sin embargo, el Googlebot principal sigue rastreando para Search, incluyendo funciones de IA como AI Overviews y AI Mode.
"Ahora que la mayoría del tráfico en internet es no humano, debemos ir más lejos y actuar más rápido para que pueda surgir un ecosistema sostenible", dijo Matthew Prince, cofundador y CEO de Cloudflare, en referencia a un hito reciente: por primera vez, el tráfico generado por bots superó al generado por personas en la web, algo que no se esperaba hasta el año próximo.
El anuncio también incluye la evolución de una herramienta ya existente. El marketplace Pay Per Crawl —que permitía a los sitios cobrar a los bots de IA por cada vez que accedían a su contenido— se transforma ahora en "Pay Per Use": los editores cobran cuando su contenido genera valor real, no simplemente cuando es descargado. Cloudflare señala que más del 50% del tráfico de rastreo de bots de IA se gasta en volver a descargar páginas que no cambiaron, lo que también implica un gasto innecesario de ancho de banda y recursos de cómputo para los sitios.
En una primera etapa, Cloudflare trabaja con dos socios para implementar el modelo: Ceramic.ai y You.com. Cuando un editor se suma al programa, recibe un pago cada vez que su contenido aparece en los resultados de búsqueda de Ceramic o cuando You.com accede a alguno de sus contenidos premium. Otras empresas de IA podrán adaptar el modelo a su propia forma de operar, según indicó la compañía.
Acerca de los comentarios
Hemos reformulado nuestra manera de mostrar comentarios, agregando tecnología de forma de que cada lector pueda decidir qué comentarios se le mostrarán en base a la valoración que tengan estos por parte de la comunidad. AMPLIAREsto es para poder mejorar el intercambio entre los usuarios y que sea un lugar que respete las normas de convivencia.
A su vez, habilitamos la casilla [email protected], para que los lectores puedan reportar comentarios que consideren fuera de lugar y que rompan las normas de convivencia.
Si querés leerlo hacé clic aquí[+]