software · 8 menciones
Mojo Dojo ha lanzado un índice detallado que clasifica el tráfico de bots de inteligencia artificial que visitan su sitio web, mojodojo.io. El análisis, basado en datos registrados desde el 6 de junio de 2026, revela que los bots de IA representaron el 24% del tráfico total de robots en los últimos
La desindexación de un sitio web de motores de búsqueda como Google requiere una configuración técnica específica que a menudo se malinterpreta. Un usuario documentó su experiencia al intentar eliminar su blog de los índices de búsqueda debido a la preocupación por el scraping de contenido para inte
Cloudflare ha anunciado la introducción de una nueva configuración llamada 'Disallow AI Training', que permite a los propietarios de sitios web mantener su contenido indexado para búsquedas tradicionales mientras se niegan a que los rastreadores de IA utilicen sus datos para entrenar modelos. Esta h
Known Agents, plataforma de analítica orientada a identificar agentes automatizados en la web, publica de forma recurrente su Agentic Web Index, un panel con métricas agregadas a partir de más de 5.000 sitios web que utilizan sus productos Agent Analytics y AI Chat Referral Tracking. Los datos, comp
La revista TIME está entregando a los rastreadores de inteligencia artificial una versión en Markdown de sus artículos, distinta de la que reciben los navegadores humanos, e integrada con anuncios del proveedor de tecnología publicitaria Mobian. Una prueba con una sola URL de TIME —cambiando solo la
Cuando un webmaster observa en sus registros una avalancha atribuida al rastreador Googlebot, lo habitual es confiar en la cabecera HTTP que dice ser ese bot. Sin embargo, esa cabecera es una identificación voluntaria que cualquiera puede falsificar. Un reciente hilo en Hacker News recoge testimonio
Cloudflare presentó nuevas herramientas para que los propietarios de sitios web gestionen el acceso de los bots de inteligencia artificial según tres usos diferenciados: búsqueda, agentes y entrenamiento de modelos. Hasta ahora, la empresa ofrecía una opción unificada para bloquear rastreadores de I
Cloudflare ha anunciado que el 15 de septiembre de 2026 su configuración predeterminada bloqueará a los rastreadores web de uso mixto (los que combinan funciones de búsqueda tradicional, agentes de IA y entrenamiento de modelos) en todas las páginas que alojen publicidad, salvo que el propietario de