Agentes de programación
Claude-Code es un bot operado por Anthropic que obtiene documentación y ejemplos mientras una IA escribe código. Claude Code es un agente de programación con IA de Anthropic que puede crear, depurar y desplegar código directamente desde la terminal, y se encarga de tareas como familiarizarse con una base de código, editar varios archivos,…. No está documentado si respeta robots.txt, y una solicitud que dice ser de Claude-Code puede comprobarse con un archivo publicado de rangos de IP.
La solicitud dice
"Claude-Code"
Se comprueba con
rangos de IP publicados de Anthropic
Comprobación en directo
Pega la dirección de la línea del log. Se compara con lo que publica el operador.
Referencia
| User agent | Claude-CodeSolo token: busca coincidencias con la subcadena. |
|---|---|
| Operador | Anthropic |
| Finalidad | Agentes de programación |
| Respeta robots.txt | Sin política |
| Método de verificación | Rangos de IPArchivo publicado de rangos de IP Se ejecuta en la máquina de un desarrollador o en un runner de CI, así que la IP de origen suele ser la del desarrollador, no la de Anthropic. El archivo de prefijos publicado no coincidirá con la mayor parte de este tráfico. |
| Patrón de rastreo | No publicado |
| Tokens de robots.txt | Claude-Code |
| Documentación del operador | https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler |
Claude Code es un agente de programación con IA de Anthropic que puede crear, depurar y desplegar código directamente desde la terminal, y se encarga de tareas como familiarizarse con una base de código, editar varios archivos,…
robots.txt
Pega una en la raíz de tu dominio. Las reglas se aplican por token.
User-agent: Claude-Code
Disallow: /User-agent: Claude-Code
Allow: /User-agent: Claude-Code
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /searchCambia las rutas de Disallow para que coincidan con tus URLs.
Bloquear Claude-Code afecta sobre todo a desarrolladores que leen tu documentación a través de una herramienta de IA. La mayoría de los sitios quieren ese tráfico.
Crea un archivo para todos los rastreadoresFAQ
Claude-Code es un bot operado por Anthropic que obtiene documentación y ejemplos mientras una IA escribe código. Claude Code es un agente de programación con IA de Anthropic que puede crear, depurar y desplegar código directamente desde la terminal, y se encarga de tareas como familiarizarse con una base de código, editar varios archivos,…. No está documentado si respeta robots.txt, y una solicitud que dice ser de Claude-Code puede comprobarse con un archivo publicado de rangos de IP.
No está documentado. Ninguna declaración del operador indica si Claude-Code lee robots.txt, así que añade la regla pero comprueba en tus registros que las solicitudes realmente se detienen.
Se ejecuta en la máquina de un desarrollador o en un runner de CI, así que la IP de origen suele ser la del desarrollador, no la de Anthropic. El archivo de prefijos publicado no coincidirá con la mayor parte de este tráfico. La referencia está publicada en https://claude.com/crawling/bots.json.
Añade el token Claude-Code a robots.txt con Disallow: /. Si el rastreador ignora robots.txt, filtra el user agent en tu CDN o proxy inverso y devuelve allí un 403.
Bloquear Claude-Code afecta sobre todo a desarrolladores que leen tu documentación a través de una herramienta de IA. La mayoría de los sitios quieren ese tráfico.