ClaudeBot
ClaudeBot es el rastreador de entrenamiento de Anthropic, la empresa creadora del asistente Claude. Recorre webs públicas y recoge su contenido para que los futuros modelos Claude aprendan de él. Si bloqueas a ClaudeBot, Anthropic excluye tu contenido futuro de sus datos de entrenamiento, y Claude tendrá menos información sobre tu negocio.
- User-agent
ClaudeBot- Does it respect robots.txt?
- Yes
How to allow it in your robots.txt
User-agent: ClaudeBot
Allow: /How to block it (not recommended)
User-agent: ClaudeBot
Disallow: /Frequently asked questions
¿Debo bloquear a ClaudeBot?
Si quieres que Claude conozca y pueda recomendar tu negocio, no. Bloquearlo excluye tu web de los datos con los que se entrenan los modelos de Anthropic, así que Claude sabrá menos de ti y más de tu competencia.
¿ClaudeBot respeta el robots.txt?
Sí. Anthropic afirma que sus tres bots (ClaudeBot, Claude-User y Claude-SearchBot) respetan las reglas estándar de robots.txt, incluidas las directivas Disallow y Crawl-delay.
¿Cómo sé si ClaudeBot visita mi web?
Busca "ClaudeBot" en los logs de acceso de tu servidor o en las analíticas de tu CDN. Cada petición suya se identifica con ese nombre en el user-agent.