Amazonbot
Amazonbot es el rastreador de Amazon. Recoge contenido web para mejorar sus productos y servicios, por ejemplo para que el asistente Alexa dé respuestas más precisas, y según su documentación puede usarse también para entrenar modelos de IA de Amazon. Si tus clientes preguntan a Alexa por servicios como el tuyo, este bot es la puerta de entrada.
- User-agent
AmazonbotMozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1; +https://developer.amazon.com/support/amazonbot) Chrome/119.0.6045.214 Safari/537.36- Does it respect robots.txt?
- Yes
- Official documentation
- https://developer.amazon.com/amazonbot
How to allow it in your robots.txt
User-agent: Amazonbot
Allow: /How to block it (not recommended)
User-agent: Amazonbot
Disallow: /Frequently asked questions
¿Debo bloquear a Amazonbot?
No es lo recomendable para un negocio. Alexa está en millones de hogares y Amazonbot alimenta sus respuestas. Bloquearlo reduce tus opciones de aparecer cuando alguien pregunta por voz por productos o servicios de tu sector.
¿Amazonbot respeta el robots.txt?
Sí, honra las directivas estándar de user-agent y allow/disallow, además de etiquetas como noindex. Eso sí, según su documentación no soporta la directiva crawl-delay.
¿Cómo sé si Amazonbot visita mi web?
Busca "Amazonbot" en los logs de tu servidor. Amazon publica además sus rangos de IP oficiales para que puedas verificar que las visitas son auténticas y no de un impostor.