User agent y reglas de robots.txt de Claude-SearchBot

Claude-SearchBot rastrea la web para mejorar la relevancia y la precisión de las respuestas de búsqueda de Claude. Bloquearlo deja tus páginas fuera de ese índice.

Búsqueda con IA Sigue el robots.txt Anthropic

User agent

Anthropic documenta solo el nombre: las peticiones contienen “Claude-SearchBot”.

Reglas de robots.txt para Claude-SearchBot

Pega un bloque en el robots.txt de la raíz de tu dominio. El cambio puede tardar hasta un día en leerse.

Bloquear Claude-SearchBot

Bloquea todas las rutas para Claude-SearchBot. Así tus páginas quedan fuera del índice de búsqueda con IA de Anthropic, y sus respuestas no pueden citarlas.

robots.txt
User-agent: Claude-SearchBot
Disallow: /

Permitir Claude-SearchBot

Deja que Claude-SearchBot descargue todas las rutas, diga lo que diga “User-agent: *”.

robots.txt
User-agent: Claude-SearchBot
Allow: /

Conviene saber

Anthropic advierte que bloquearlo puede reducir tu visibilidad en los resultados de búsqueda de los usuarios.

Preguntas sobre Claude-SearchBot

¿Qué es Claude-SearchBot?

Claude-SearchBot rastrea la web para mejorar la relevancia y la precisión de las respuestas de búsqueda de Claude. Bloquearlo deja tus páginas fuera de ese índice.

¿Cómo bloqueo Claude-SearchBot?

Añade “User-agent: Claude-SearchBot” y “Disallow: /” a tu robots.txt. Así tus páginas quedan fuera del índice de búsqueda con IA de Anthropic, y sus respuestas no pueden citarlas.

¿Claude-SearchBot respeta el robots.txt?

Sí. Anthropic dice que Claude-SearchBot sigue las reglas de robots.txt escritas para él.

¿Cuál es el user agent de Claude-SearchBot?

Anthropic documenta el nombre “Claude-SearchBot”, que aparece en sus peticiones.

¿Cómo compruebo las peticiones de Claude-SearchBot?

Compara la IP de la petición con la lista publicada de Anthropic (https://claude.com/crawling/bots.json). El user agent por sí solo se puede falsificar.

Fuente: support.claude.com, comprobada el 17 de nov. de 2026. Directorio de crawlers de IA

Los archivos son el comienzo. Las respuestas, el resultado.

Las preguntas de tus compradores en ocho motores de IA, en tu calendario y con historial. Gratis durante 7 días.