Robots de recherche IA
Amzn-SearchBot est un bot exploité par Amazon qui indexe des pages afin qu'un moteur de réponses IA puisse les citer. Amzn-SearchBot explore des pages pour les services de recherche d'Amazon liés aux achats et à l'assistant. Son respect du fichier robots.txt n'est pas documenté. Moyen de vérifier une requête se réclamant de Amzn-SearchBot : une résolution DNS inverse confirmée par une résolution directe.
La requête annonce
"Amzn-SearchBot"
Comparé à
DNS inverse (Amazon)
Vérification en direct
Collez l'adresse figurant dans la ligne de journal. Elle est comparée aux informations publiées par l'opérateur.
Référence
| User agent | Amzn-SearchBotJeton seul : recherchez la sous-chaîne. |
|---|---|
| Opérateur | Amazon |
| Finalité | Robots de recherche IA |
| Respecte robots.txt | Aucune politique |
| Méthode de vérification | DNS inverseDNS inverse, confirmé par résolution directe Fait partie de la famille de robots d'Amazon documentée avec Amazonbot. Vérifiez-le avec le même contrôle DNS, inverse puis direct. |
| Comportement d'exploration | Non publié |
| Jetons robots.txt | Amzn-SearchBot |
| Documentation de l'opérateur | Aucune publiée |
Amzn-SearchBot explore des pages pour les services de recherche d'Amazon liés aux achats et à l'assistant. Il est documenté avec Amazonbot et se vérifie de la même manière.
robots.txt
Placez l'un de ces fichiers à la racine de votre domaine. Les règles s'appliquent jeton par jeton.
User-agent: Amzn-SearchBot
Disallow: /User-agent: Amzn-SearchBot
Allow: /User-agent: Amzn-SearchBot
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /searchModifiez les chemins Disallow pour qu'ils correspondent à vos propres URL.
Bloquer Amzn-SearchBot retire le site de l'index qui alimente ses réponses : il n'y sera plus cité. Si le trafic provenant des réponses IA compte pour vous, bloquez plutôt le crawler d'entraînement et laissez celui-ci accéder au site.
Générer un fichier pour tous les robotsFAQ
Amzn-SearchBot est un bot exploité par Amazon qui indexe des pages afin qu'un moteur de réponses IA puisse les citer. Amzn-SearchBot explore des pages pour les services de recherche d'Amazon liés aux achats et à l'assistant. Son respect du fichier robots.txt n'est pas documenté. Moyen de vérifier une requête se réclamant de Amzn-SearchBot : une résolution DNS inverse confirmée par une résolution directe.
Non documenté. Aucune déclaration de l'opérateur n'indique si Amzn-SearchBot lit le fichier robots.txt. Ajoutez la règle, puis vérifiez dans vos journaux que les requêtes cessent réellement.
Fait partie de la famille de robots d'Amazon documentée avec Amazonbot. Vérifiez-le avec le même contrôle DNS, inverse puis direct. La référence est publiée sur https://developer.amazon.com/amazonbot.
Ajoutez le jeton Amzn-SearchBot au fichier robots.txt avec Disallow: /. Si le crawler ignore robots.txt, filtrez le user agent au niveau de votre CDN ou de votre proxy inverse et renvoyez une erreur 403.
Bloquer Amzn-SearchBot retire le site de l'index qui alimente ses réponses : il n'y sera plus cité. Si le trafic provenant des réponses IA compte pour vous, bloquez plutôt le crawler d'entraînement et laissez celui-ci accéder au site.