Agents de programmation
Claude-Code est un bot exploité par Anthropic qui récupère de la documentation et des exemples pendant qu'une IA écrit du code. Claude Code est un agent de programmation IA d'Anthropic capable de concevoir, déboguer et livrer du code directement depuis le terminal, en prenant en charge des tâches comme la prise en main d'une base de code, les modifications sur plusieurs fichiers,…. Son respect du fichier robots.txt n'est pas documenté. Moyen de vérifier une requête se réclamant de Claude-Code : un fichier de plages d'IP publié.
La requête annonce
"Claude-Code"
Comparé à
plages IP publiées (Anthropic)
Vérification en direct
Collez l'adresse figurant dans la ligne de journal. Elle est comparée aux informations publiées par l'opérateur.
Référence
| User agent | Claude-CodeJeton seul : recherchez la sous-chaîne. |
|---|---|
| Opérateur | Anthropic |
| Finalité | Agents de programmation |
| Respecte robots.txt | Aucune politique |
| Méthode de vérification | Plages d'IPFichier de plages d'IP publié S'exécute sur la machine d'un développeur ou sur un exécuteur CI : l'IP source est donc généralement celle du développeur, et non d'Anthropic. Le fichier de préfixes publié ne correspondra pas à la majeure partie de ce trafic. |
| Comportement d'exploration | Non publié |
| Jetons robots.txt | Claude-Code |
| Documentation de l'opérateur | https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler |
Claude Code est un agent de programmation IA d'Anthropic capable de concevoir, déboguer et livrer du code directement depuis le terminal, en prenant en charge des tâches comme la prise en main d'une base de code, les modifications sur plusieurs fichiers,…
robots.txt
Placez l'un de ces fichiers à la racine de votre domaine. Les règles s'appliquent jeton par jeton.
User-agent: Claude-Code
Disallow: /User-agent: Claude-Code
Allow: /User-agent: Claude-Code
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /searchModifiez les chemins Disallow pour qu'ils correspondent à vos propres URL.
Bloquer Claude-Code touche surtout les développeurs qui consultent votre documentation via un outil d'IA. La plupart des sites souhaitent conserver ce trafic.
Générer un fichier pour tous les robotsFAQ
Claude-Code est un bot exploité par Anthropic qui récupère de la documentation et des exemples pendant qu'une IA écrit du code. Claude Code est un agent de programmation IA d'Anthropic capable de concevoir, déboguer et livrer du code directement depuis le terminal, en prenant en charge des tâches comme la prise en main d'une base de code, les modifications sur plusieurs fichiers,…. Son respect du fichier robots.txt n'est pas documenté. Moyen de vérifier une requête se réclamant de Claude-Code : un fichier de plages d'IP publié.
Non documenté. Aucune déclaration de l'opérateur n'indique si Claude-Code lit le fichier robots.txt. Ajoutez la règle, puis vérifiez dans vos journaux que les requêtes cessent réellement.
S'exécute sur la machine d'un développeur ou sur un exécuteur CI : l'IP source est donc généralement celle du développeur, et non d'Anthropic. Le fichier de préfixes publié ne correspondra pas à la majeure partie de ce trafic. La référence est publiée sur https://claude.com/crawling/bots.json.
Ajoutez le jeton Claude-Code au fichier robots.txt avec Disallow: /. Si le crawler ignore robots.txt, filtrez le user agent au niveau de votre CDN ou de votre proxy inverse et renvoyez une erreur 403.
Bloquer Claude-Code touche surtout les développeurs qui consultent votre documentation via un outil d'IA. La plupart des sites souhaitent conserver ce trafic.