Además de los rastreadores comunes como Googlebot para la web, imágenes y vídeos, Google también ejecuta rastreadores de casos especialesEstán diseñados para fines específicos, como la verificación del sitio, las pruebas de datos estructurados o la comprobación de la calidad de los anuncios. No rastrean todo el sitio con regularidad, pero aparecen en momentos clave para completar una tarea.
Por qué son importantes los rastreadores de casos especiales
Es posible que estos rastreadores no afecten la indexación diaria, pero sí pueden afectar la forma en que se verifica su sitio, cómo se prueban los datos estructurados o el rendimiento de los anuncios. Si los bloquea por error en su... robots.txtEs posible que algunos servicios de Google no funcionen correctamente.
Rastreadores de casos especiales de Google
Estos son los más comunes que puedes ver:
| Nombre del rastreador | Cadena de agente de usuario | Propósito |
| APIs-Google | APIs-Google (+https://developers.google.com/webmasters/APIs-Google.html) | Utilizado por las API de Google para acceder al contenido. |
| Buscador de fuentes | FeedFetcher-Google | Obtiene feeds RSS/Atom para servicios de Google como Google News o Podcasts. |
| Lectura en voz alta de Google | Lectura en voz alta de Google | Obtiene contenido para servicios de texto a voz (por ejemplo, el Asistente de Google leyendo artículos). |
| Duplex en la Web | Herramienta de inspección de Google | Simula interacciones del usuario (como reservar un servicio) para probar la usabilidad. |
| Verificación del sitio de Google | Verificación del sitio de Google | Se utiliza al verificar la propiedad del sitio en Google Search Console. |
| AdsBot (móvil y escritorio) | AdsBot-Google-Móvil / AdsBot-Google | Comprueba la calidad de la página de destino para Google Ads. |
| Otras herramientas de prueba | Herramienta de inspección de Google (utilizada por Lighthouse y Rich Results Test) | Se rastrea cuando ejecuta pruebas en las herramientas de Google. |
Aspectos clave para recordar
-
Los rastreadores de casos especiales suelen aparecer sólo cuando se activa (por ejemplo, al verificar un sitio o ejecutar una prueba de datos estructurados).
-
Se no indexes tu sitio Como Googlebot, pero garantizan que las funciones y herramientas funcionen correctamente.
-
Bloquearlos en robots.txt podría dañar servicios importantes de Google (como la verificación de sitios o la verificación de anuncios).
Si no está seguro de qué rastreador es cuál, consulte nuestra guía sobre el Lista de rastreadores comunes de Google.
Cómo verificar un rastreador de casos especiales
A veces, verás bots inusuales en los registros de tu servidor y te preguntarás si realmente son de Google o simplemente bots falsos que fingen ser de Google. Confiar solo en... cadena de agente de usuario (como AdsBot-Google or FeedFetcher-Google) no es suficiente, porque los spammers pueden copiar esos nombres.
Por eso Google recomienda verificar los rastreadores por su Dirección IP. Aquí le mostramos cómo puede hacerlo:
Paso 1: Encuentra la dirección IP del rastreador
-
Revise tu registros del servidor para ver la dirección IP de la solicitud del bot.
Paso 2: Realizar una búsqueda DNS inversa
-
Ejecute una búsqueda DNS inversa en esa IP.
-
El resultado debe apuntar a un dominio que termina en
googlebot.comorgoogle.com.
Paso 3: Confirmar con una búsqueda DNS directa
-
Tome ese nombre de dominio y búsquelo nuevamente para ver si se resuelve nuevamente en el misma dirección IP.
-
Si coincide, el rastreador es un rastreador genuino de Google.
Ejemplo (simplificado)
-
Ves una visita de IP
66.249.66.1. -
Búsqueda DNS inversa → muestra
crawl-66-249-66-1.googlebot.com. -
Búsqueda DNS directa en ese nombre de host → devuelve
66.249.66.1.
Verificado como un rastreador real de Google.
