User agent y reglas de robots.txt de ClaudeBot
ClaudeBot es el crawler de Anthropic para contenido web que puede usarse en el entrenamiento de sus modelos. Bloquearlo deja tu contenido futuro fuera de los datos de entrenamiento de Anthropic.
User agent
Anthropic documenta solo el nombre: las peticiones contienen “ClaudeBot”.
Reglas de robots.txt para ClaudeBot
Pega un bloque en el robots.txt de la raíz de tu dominio. El cambio puede tardar hasta un día en leerse.
Bloquear ClaudeBot
Bloquea todas las rutas para ClaudeBot. Así tus páginas futuras quedan fuera de lo que Anthropic puede usar para entrenamiento. No cambia los resultados de búsqueda.
User-agent: ClaudeBot Disallow: /
Permitir ClaudeBot
Deja que ClaudeBot descargue todas las rutas, diga lo que diga “User-agent: *”.
User-agent: ClaudeBot Allow: /
Conviene saber
ClaudeBot también respeta la directiva no estándar Crawl-delay. Anthropic desaconseja bloquear por IP, porque puede impedir que el bot lea tu robots.txt.
Preguntas sobre ClaudeBot
¿Qué es ClaudeBot?
ClaudeBot es el crawler de Anthropic para contenido web que puede usarse en el entrenamiento de sus modelos. Bloquearlo deja tu contenido futuro fuera de los datos de entrenamiento de Anthropic.
¿Cómo bloqueo ClaudeBot?
Añade “User-agent: ClaudeBot” y “Disallow: /” a tu robots.txt. Así tus páginas futuras quedan fuera de lo que Anthropic puede usar para entrenamiento. No cambia los resultados de búsqueda.
¿ClaudeBot respeta el robots.txt?
Sí. Anthropic dice que ClaudeBot sigue las reglas de robots.txt escritas para él.
¿Cuál es el user agent de ClaudeBot?
Anthropic documenta el nombre “ClaudeBot”, que aparece en sus peticiones.
¿Cómo compruebo las peticiones de ClaudeBot?
Compara la IP de la petición con la lista publicada de Anthropic (https://claude.com/crawling/bots.json). El user agent por sí solo se puede falsificar.
Fuente: support.claude.com, comprobada el 17 de nov. de 2026. Directorio de crawlers de IA
Los archivos son el comienzo. Las respuestas, el resultado.
Las preguntas de tus compradores en ocho motores de IA, en tu calendario y con historial. Gratis durante 7 días.