YouBot
YouBot es el rastreador de You.com, un buscador con asistentes de IA integrados. Descubre e indexa páginas para ofrecer resultados en tiempo real a sus usuarios, citando las fuentes en las respuestas. Es un actor más pequeño que Google o Bing, pero permitirlo no cuesta nada y suma otra vía por la que clientes potenciales pueden llegar a tu web.
- User-agent
YouBotMozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; YouBot/1.0; +https://docs.you.com/youbot; env:prod) Chrome/X.X.X.X Safari/537.36- Does it respect robots.txt?
- Yes
- Official documentation
- https://you.com/docs/youbot
How to allow it in your robots.txt
User-agent: YouBot
Allow: /How to block it (not recommended)
User-agent: YouBot
Disallow: /Frequently asked questions
¿Debo bloquear a YouBot?
No hay motivo. Su rastreo es respetuoso y permitirlo te da presencia en otro buscador de IA que cita fuentes. Cuantos más asistentes puedan leer tu web, más oportunidades de aparecer en sus respuestas.
¿YouBot respeta el robots.txt?
Sí, totalmente. Su documentación oficial confirma que respeta las directivas de robots.txt y las preferencias de velocidad de rastreo, incluido crawl-delay, con el user-agent "YouBot".
¿Cómo sé si YouBot visita mi web?
Busca "YouBot" en los logs de tu servidor. Su user-agent incluye un enlace a la documentación oficial de You.com que lo identifica.