Cloudflare presentó nuevas herramientas para que los propietarios de sitios web gestionen el acceso de los bots de inteligencia artificial según tres usos diferenciados: búsqueda, agentes y entrenamiento de modelos. Hasta ahora, la empresa ofrecía una opción unificada para bloquear rastreadores de IA, pero considera insuficiente esa clasificación binaria porque la IA se ha integrado en productos muy diversos, desde buscadores hasta navegadores automatizados.
La compañía propondrá una nueva configuración predeterminada a partir del 15 de septiembre de 2026: en las páginas que muestran anuncios, los bots de entrenamiento y de agentes quedarán bloqueados de forma automática, mientras que los rastreadores de búsqueda seguirán permitidos. Los rastreadores con funciones múltiples, como Googlebot, Applebot o BingBot, que combinan indexación y entrenamiento, se evaluarán según el conjunto de sus comportamientos y quedarán bloqueados si alguno de ellos está restringido.
Las nuevas opciones estarán disponibles también para usuarios del plan gratuito, no solo para clientes de pago. Cloudflare defiende que el bloqueo total del tráfico automatizado perjudica a los sitios pequeños, que necesitan aparecer en buscadores para ser descubiertos, y afirma que los operadores de bots deberían separar sus rastreadores según su propósito para aumentar la transparencia. La empresa enmarcó la iniciativa como una evolución del llamado 'Content Independence Day', lanzado hace un año, y aseguró que abrirá la discusión sobre la clasificación con clientes y socios del sector.