Claude-SearchBot
Claude-SearchBot es el rastreador de búsqueda de Anthropic. Indexa contenido para que las funciones de búsqueda de Claude devuelvan resultados relevantes y actualizados. Si bloqueas este bot, Anthropic no indexará tu web para esas búsquedas y tu negocio perderá oportunidades de aparecer como fuente en las respuestas de Claude.
- User-agent
Claude-SearchBot- Does it respect robots.txt?
- Yes
How to allow it in your robots.txt
User-agent: Claude-SearchBot
Allow: /How to block it (not recommended)
User-agent: Claude-SearchBot
Disallow: /Frequently asked questions
¿Debo bloquear a Claude-SearchBot?
No, salvo que tengas un motivo muy concreto. Bloquearlo impide que Claude indexe tu web para sus resultados de búsqueda, lo que reduce tus posibilidades de ser citado como fuente.
¿En qué se diferencia de ClaudeBot?
ClaudeBot recoge datos para entrenar los modelos; Claude-SearchBot indexa contenido para las búsquedas en tiempo real de Claude. Son controles separados en robots.txt: puedes permitir uno y bloquear el otro.
¿Cómo sé si Claude-SearchBot visita mi web?
Busca "Claude-SearchBot" en los logs de tu servidor o en tu CDN. Si aparece, tu contenido está siendo indexado para la búsqueda de Claude.