Saltar al contenido

Verificar Googlebot: el fallo del DNS inverso

La comprobación por línea de comandos de la página de Google acepta nombres que recibe cualquier máquina alquilada en Google Cloud. Repetimos la prueba el 9 de noviembre de 2026. Qué cambiar en tu regla de firewall, y el error contrario: bloquear al Googlebot real.

En este post
  1. ¿Dónde está el fallo en los pasos de Google?
  2. Qué vimos al repetir la prueba
  3. ¿Por qué molesta un Googlebot falso con vía libre?
  4. El error contrario: endurecer la regla y bloquear al Googlebot real
  5. ¿Vale lo mismo para los robots de IA?
  6. Qué revisar el lunes

Si tu firewall deja pasar a Googlebot con los pasos de DNS inverso de la página de Google, cualquiera con una máquina alquilada en Google Cloud puede entrar por la misma puerta. La empresa SenseGap señaló el problema el 5 de noviembre de 2026, y el 9 de noviembre repetimos la prueba: se confirma. Corregirlo lleva una mañana. Cambia la regla por la lista de IP que publica el propio Google, o exige un nombre terminado en .googlebot.com.

¿Dónde está el fallo en los pasos de Google?

En el segundo de los cuatro pasos. La página indica consultar el nombre inverso de la IP, aceptar una terminación en googlebot.com, google.com o googleusercontent.com, consultar ese nombre en sentido directo y ver si vuelve la misma IP. La tercera terminación es el problema: cada máquina virtual de Google Cloud recibe un nombre en bc.googleusercontent.com, y quien alquila una cumple los cuatro pasos sin hacer nada especial.

Más abajo, en la misma página, una tabla cuenta otra historia. Allí, Googlebot usa nombres en googlebot.com, y googleusercontent solo aparece como gae.googleusercontent.com, reservado a los buscadores que activa un usuario, como el verificador de sitios. La lista de los pasos es larga porque cubren todos los robots de Google a la vez. Quien los copió solo para admitir a Googlebot se llevó también un sufijo que no necesitaba. No encontramos ningún comentario de Google sobre esto hasta el 9 de noviembre de 2026.

Qué vimos al repetir la prueba

Tres de cinco IP de Google Cloud pasaron los cuatro pasos. La muestra es pequeña a propósito, porque solo queríamos saber si la puerta existe. Consultamos DNS y las listas públicas, sin enviar ninguna petición a ningún sitio.

  • Cinco direcciones elegidas a mano, todas dentro de los rangos publicados de Google Cloud. Tres volvieron con un nombre en bc.googleusercontent.com, y la consulta directa devolvió la misma IP. Las otras dos no tienen nombre inverso.
  • Ninguna de las cinco está en common-crawlers.json, la lista oficial de Googlebot. Esa comprobación separó los casos sin dificultad.
  • Como contraprueba, probamos 12 direcciones tomadas de esa lista: 11 volvieron como crawl-…googlebot.com y coincidieron en ambos sentidos; 1 no respondió a la consulta.

El informe de campo es de SenseGap, que vende un panel de robots, y conviene leerlo sabiendo eso. En ocho días, del 28 de octubre al 5 de noviembre de 2026, su sitio recibió 89 peticiones de máquinas de Google Cloud que decían ser Googlebot y superaban la comprobación. Buscaban archivos como .env y .git/config, no páginas. Son cuatro sitios y datos muestreados: alcanza para saber que ocurre, no con qué frecuencia ocurre en el tuyo.

¿Por qué molesta un Googlebot falso con vía libre?

Porque la regla que admite al robot suele dejarlo fuera del alcance de lo que frena a los demás visitantes: límites de peticiones, desafíos, bloqueos por país. En octubre de 2026, Gary Illyes, de Google, dijo en un pódcast que los raspadores se hacen pasar por Googlebot justamente porque los sitios le abren camino, y que cambiar el user agent lleva segundos.

También hay un coste menos visible. Quien analiza logs para entender el rastreo empieza a contar visitas falsas como si fueran de Google, y una carpeta "muy rastreada" puede ser solo alguien barriendo el servidor en busca de credenciales.

El error contrario: endurecer la regla y bloquear al Googlebot real

Bloquear al robot correcto suele salir más caro que dejar pasar al equivocado. Según la documentación de Google, 403, 404 y los demás códigos 4xx, salvo el 429, se tratan como contenido inexistente, y la URL ya indexada sale del índice. La misma página pide no usar 401 ni 403 para frenar el rastreo; para eso están el 429 y el 503.

El sitio de VLC dio un ejemplo, publicado el 5 de noviembre de 2026. Devolvió 418, un código 4xx, y el resultado siguió en Google con un detalle que Gary Illyes describió en un comentario en LinkedIn: la Búsqueda retuvo la URL un tiempo por ser muy importante y, sin saber qué había en la página, se quedó con "no snippet, no favicon, no nothing". Quedaron el enlace y el último título bueno. El motivo del 418 no se ha hecho público, y nada indica que haya sido un firewall.

De ahí salen dos avisos. Google no documenta qué URL reciben esta protección ni durante cuánto tiempo, así que no planifiques contando con ella. Y un resultado sin descripción y sin icono es un buen motivo para abrir la Inspección de URLs: el navegador de la oficina puede recibir un 200 mientras el robot recibe otra cosa.

¿Vale lo mismo para los robots de IA?

Vale, y tienen listas propias. OpenAI publica una por robot (gptbot.json, searchbot.json, chatgpt-user.json), Perplexity hace lo mismo con dos archivos, y Anthropic mantiene una sola, sin decir qué robots cubre. En los cuatro sitios de SenseGap, el 32% de las visitas que decían ser GPTBot y el 87% de las que decían ser PerplexityBot no superaron la comprobación publicada por la propia empresa. En OAI-SearchBot fue el 1%. Son cifras de un proveedor, en pocos sitios, que sirven de alerta y no de media del mercado.

Un cuidado antes de actuar: Anthropic advierte que bloquear sus IP puede no garantizar la exclusión, porque su robot deja de poder leer tu robots.txt. Una lista de IP sirve para saber quién es quién. Decir qué puede leer cada uno sigue siendo tarea del robots.txt.

Qué revisar el lunes

  • Busca en el firewall, la CDN, los plugins y los scripts de logs la regla que menciona Googlebot. Si solo mira el user agent, está abierta. Si acepta googleusercontent.com, es el caso de este texto.
  • Mejor comparar la IP con developers.google.com/static/crawling/ipranges/common-crawlers.json, actualizada por una tarea automática, porque la lista cambia. Si anuncias en Google, AdsBot está en special-crawlers.json.
  • Si te quedas con DNS, exige la terminación .googlebot.com, con el punto, y confirma la vuelta. Sin el punto, un dominio como notgooglebot.com también pasa.
  • Si la comprobación la hace un servicio externo, pregunta cómo. No probamos ninguno.
  • Cruza 30 días de logs: user agent Googlebot, IP fuera de la lista, y qué pidieron esos visitantes.
  • Después de cambiar la regla, ejecuta la prueba en vivo de la Inspección de URLs en la home y en una página interna, y mira durante unos días en Estadísticas de rastreo si crecieron los 403.

Lee también

  1. Producto · 4 min de lecturaSilent Puma: lo que la IA dice de tu marcaTres lecturas nuevas en cada ejecución: si ChatGPT, Gemini, Perplexity y Claude nombran la marca, a qué páginas mandan visitantes los asistentes de IA y qué enlaces de otros sitios caen en páginas muertas. Y cuatro más, con el plan de cada una.
  2. Método · 5 min de lecturaFavicon en Google: redirecciones y reglasEn octubre de 2026 Google aclaró que Googlebot tiene que seguir cada redirección de la home hasta la página que declara el favicon. Basta un paso roto para que aparezca el globo gris. Además: los formatos aceptados y la regla de un ícono por hostname.

Mira esta cuenta en tu sitio

Rastrear mi sitio gratis

3000 páginas al mes en el plan Basic, sin tarjeta.