Agentes autónomos
Google-CloudVertexBot es un bot operado por Google que navega por la web por su cuenta para completar tareas de varios pasos. Google-CloudVertexBot rastrea sitios a petición de sus propietarios cuando crean agentes de Vertex AI. Respeta robots.txt, y una solicitud que dice ser de Google-CloudVertexBot puede comprobarse con un archivo publicado de rangos de IP.
La solicitud dice
"Google-CloudVertexBot"
Se comprueba con
rangos de IP publicados de Google
Comprobación en directo
Pega la dirección de la línea del log. Se compara con lo que publica el operador.
Referencia
| User agent | Google-CloudVertexBotSolo token: busca coincidencias con la subcadena. |
|---|---|
| Operador | |
| Finalidad | Crear y gestionar modelos de IA para empresas con Vertex AI |
| Respeta robots.txt | Respetafuente |
| Método de verificación | Rangos de IPArchivo publicado de rangos de IP Rastrea en nombre de un cliente de Vertex AI que crea su propio agente con fundamentación. Si lo bloqueas, bloqueas a ese cliente, no a la Búsqueda de Google. https://developers.google.com/static/search/apis/ipranges/special-crawlers.json |
| Patrón de rastreo | No publicado |
| Tokens de robots.txt | Google-CloudVertexBotCloudVertexBot |
| Documentación del operador | https://developers.google.com/search/docs/crawling-indexing/overview-google-crawlers |
Google-CloudVertexBot rastrea sitios a petición de sus propietarios cuando crean agentes de Vertex AI.
robots.txt
Pega una en la raíz de tu dominio. Las reglas se aplican por token.
User-agent: Google-CloudVertexBot
User-agent: CloudVertexBot
Disallow: /User-agent: Google-CloudVertexBot
User-agent: CloudVertexBot
Allow: /User-agent: Google-CloudVertexBot
User-agent: CloudVertexBot
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /searchCambia las rutas de Disallow para que coincidan con tus URLs.
Bloquear Google-CloudVertexBot detiene las sesiones automatizadas que rellenan formularios, recorren flujos y leen páginas como lo haría un usuario con sesión iniciada. Aquí suelen funcionar mejor los límites de frecuencia y los desafíos que una línea en robots.txt.
Crea un archivo para todos los rastreadoresFAQ
Google-CloudVertexBot es un bot operado por Google que navega por la web por su cuenta para completar tareas de varios pasos. Google-CloudVertexBot rastrea sitios a petición de sus propietarios cuando crean agentes de Vertex AI. Respeta robots.txt, y una solicitud que dice ser de Google-CloudVertexBot puede comprobarse con un archivo publicado de rangos de IP.
Sí. El operador documenta que Google-CloudVertexBot lee robots.txt y respeta las reglas Disallow de su propio token. Las reglas se aplican la próxima vez que descarga el archivo, lo que puede ocurrir horas o días después de publicarlas.
Rastrea en nombre de un cliente de Vertex AI que crea su propio agente con fundamentación. Si lo bloqueas, bloqueas a ese cliente, no a la Búsqueda de Google. La referencia está publicada en https://developers.google.com/static/search/apis/ipranges/special-crawlers.json.
Añade estos tokens de user agent (Google-CloudVertexBot, CloudVertexBot) a robots.txt con Disallow: /. Si el rastreador ignora robots.txt, filtra el user agent en tu CDN o proxy inverso y devuelve allí un 403.
Bloquear Google-CloudVertexBot detiene las sesiones automatizadas que rellenan formularios, recorren flujos y leen páginas como lo haría un usuario con sesión iniciada. Aquí suelen funcionar mejor los límites de frecuencia y los desafíos que una línea en robots.txt.