User agent y reglas de robots.txt de Claude-SearchBot
Claude-SearchBot rastrea la web para mejorar la relevancia y la precisión de las respuestas de búsqueda de Claude. Bloquearlo deja tus páginas fuera de ese índice.
User agent
Anthropic documenta solo el nombre: las peticiones contienen “Claude-SearchBot”.
Reglas de robots.txt para Claude-SearchBot
Pega un bloque en el robots.txt de la raíz de tu dominio. El cambio puede tardar hasta un día en leerse.
Bloquear Claude-SearchBot
Bloquea todas las rutas para Claude-SearchBot. Así tus páginas quedan fuera del índice de búsqueda con IA de Anthropic, y sus respuestas no pueden citarlas.
User-agent: Claude-SearchBot Disallow: /
Permitir Claude-SearchBot
Deja que Claude-SearchBot descargue todas las rutas, diga lo que diga “User-agent: *”.
User-agent: Claude-SearchBot Allow: /
Conviene saber
Anthropic advierte que bloquearlo puede reducir tu visibilidad en los resultados de búsqueda de los usuarios.
Preguntas sobre Claude-SearchBot
¿Qué es Claude-SearchBot?
Claude-SearchBot rastrea la web para mejorar la relevancia y la precisión de las respuestas de búsqueda de Claude. Bloquearlo deja tus páginas fuera de ese índice.
¿Cómo bloqueo Claude-SearchBot?
Añade “User-agent: Claude-SearchBot” y “Disallow: /” a tu robots.txt. Así tus páginas quedan fuera del índice de búsqueda con IA de Anthropic, y sus respuestas no pueden citarlas.
¿Claude-SearchBot respeta el robots.txt?
Sí. Anthropic dice que Claude-SearchBot sigue las reglas de robots.txt escritas para él.
¿Cuál es el user agent de Claude-SearchBot?
Anthropic documenta el nombre “Claude-SearchBot”, que aparece en sus peticiones.
¿Cómo compruebo las peticiones de Claude-SearchBot?
Compara la IP de la petición con la lista publicada de Anthropic (https://claude.com/crawling/bots.json). El user agent por sí solo se puede falsificar.
Fuente: support.claude.com, comprobada el 17 de nov. de 2026. Directorio de crawlers de IA
Los archivos son el comienzo. Las respuestas, el resultado.
Las preguntas de tus compradores en ocho motores de IA, en tu calendario y con historial. Gratis durante 7 días.