Amazon ha anunciado que su bot de rastreo web Amazonbot comenzará a respetar el archivo robots.txt a partir del lunes 15 de junio de 2026. La compañía envió una comunicación a editores informándoles que las preferencias de rastreo se gestionarán únicamente a través de las directivas estándar de la industria, permitiendo a los webmaster controlar el acceso a nivel de página, directorio o sitio. Esta medida representa un cambio significativo en la política de rastreo de Amazon, que anteriormente no respetaba el protocolo robots.txt, lo cual había generado controversia en la comunidad web. El autor de la nota señala que la falta de respeto de Amazonbot por este protocolo fue precisamente lo que motivó el desarrollo de Anubis, una herramienta de protección contra scrapers. Los editores que no implementen directivas robots.txt antes de la fecha límite verán que Amazonbot adoptará prácticas estándar de rastreo web.
Amazonbot comenzará a respetar robots.txt a partir de junio de 2026
