Google alerta: migrar a un CDN puede disparar el crawling
Gary Illyes y Cherry Prommawin, ambos de Google, acaban de lanzar una advertencia que debería hacer saltar las alarmas en cualquier equipo técnico que esté planificando una migración a CDN: mover el sitio detrás de un Cloudflare, Akamai o Fastly puede disparar el crawl rate de Googlebot y, paradójicamente, tumbar el servidor de origen en los primeros días. A eso se suma el riesgo real de bloquear a Googlebot sin darse cuenta al activar las reglas de protección anti-bot por defecto.
El mensaje llega en un momento en el que muchos ecommerce hispanohablantes están moviendo infraestructura hacia CDNs para mejorar Core Web Vitals y reducir latencia frente a mercados LATAM. La teoría dice que ganas rendimiento; la práctica, según Google, es que durante la ventana de migración el origen puede recibir más tráfico que nunca. Vamos a desmontar por qué ocurre y qué debes hacer para no comerte una caída de indexación.
Por qué Googlebot acelera justo cuando metes un CDN
El sistema de crawling de Google funciona con un principio sencillo: si el servidor responde rápido, asume que puede aguantar más peticiones y sube el ritmo progresivamente. Cuando colocas un CDN delante, los TTFB caen en picado y Googlebot lo interpreta como luz verde para rascar más URLs por segundo.
El problema, tal y como explica Illyes, es que la caché del CDN arranca vacía. Hasta que un bot o un usuario no pide una URL, el CDN no tiene nada que servir y tiene que ir al origen a buscarla. En la segunda petición ya cachea, pero la primera siempre pasa por tu servidor real. Multiplicado por millones de URLs en un ecommerce grande, el resultado es lo que Illyes describe gráficamente: «los crawlers beben de una manguera contra incendios».
En mi experiencia auditando migraciones, esto es especialmente brutal en tiendas con facetado abierto a indexación, calendarios o catálogos con miles de variantes. El CDN tarda días o semanas en calentar toda la caché, y mientras tanto el origen sufre más que antes de la migración.
El error silencioso: bloquear Googlebot con las reglas anti-bot
Aquí viene la segunda trampa, y es la que más veo en clientes. Un admin ve el pico de tráfico en el panel del CDN, piensa que le están scrapeando y activa el típico «Bot Fight Mode» o reglas de seguridad agresivas. El CDN empieza a lanzar challenges CAPTCHA a cualquier petición automatizada, y Googlebot, lógicamente, no sabe identificar semáforos en una imagen.
Prommawin lo confirma: si el bloqueo se prolonga, Google empieza a tirar páginas del índice. He visto casos de ecommerce que perdieron un 40-60% de visibilidad en dos semanas por esto, y lo peor es que el diagnóstico es complicado si no revisas los logs del CDN y cruzas con Search Console.
La recomendación oficial es clara:
- Whitelist por verificación de IP de crawlers conocidos (Googlebot, Bingbot, etc.) usando los rangos oficiales que Google publica en su JSON.
- Rate limiting específico para Googlebot si realmente el origen sufre, en lugar de bloqueo total.
- Nunca activar protecciones blanket sin excluir user-agents verificados.
Pre-warming: la práctica que casi nadie aplica
La solución que propone Illyes es el pre-warming de caché: antes de apuntar el DNS al CDN y abrir la puerta a buscadores, lanza tú mismo peticiones programáticas a tus URLs más importantes para que el CDN las cachee en frío.
En la práctica, esto se hace con un script que recorre:
- Las URLs del sitemap XML prioritarias (home, categorías top, PDPs con más tráfico orgánico).
- Las top 10.000 URLs por sesiones de los últimos 90 días (sácalas de GA4 o Search Console).
- Páginas de alto valor comercial aunque tengan menos tráfico.
Herramientas como Screaming Frog en modo list, o un simple curl en paralelo con xargs, hacen el trabajo. Para sitios grandes, conviene distribuir las peticiones por nodos geográficos del CDN, porque la caché suele ser regional (una URL cacheada en Madrid no está cacheada en São Paulo).
Qué hacer antes, durante y después de la migración
Mi checklist operativo para cualquier migración a CDN en 2026:
- Antes: inventario de URLs indexables, verificación de rangos de IP de Googlebot en el CDN, configuración de whitelist, desactivación de Bot Fight Mode agresivo.
- Durante: pre-warming programático de top URLs, monitorización en tiempo real de logs del origen y del CDN, alertas sobre códigos 4xx/5xx servidos a user-agents de buscadores.
- Después: revisión diaria del informe de Estadísticas de rastreo en Search Console durante al menos tres semanas, comparando promedio de peticiones, tiempo de respuesta y bytes descargados.
Conclusión práctica
Una migración a CDN no es un cambio de infraestructura neutro para SEO. El propio Google reconoce que su sistema de crawling va a reaccionar subiendo el ritmo, y que las herramientas de seguridad por defecto de los CDNs están diseñadas pensando en scrapers, no en Googlebot. Si planificas la migración con pre-warming, whitelist por verificación de IP y monitorización activa de logs, el CDN te dará el rendimiento prometido sin comerte la indexación por el camino. Si improvisas, el coste puede ser semanas de visibilidad perdida que luego cuesta mucho recuperar.
Fuente original: Search Engine Journal
Autor
Vakho Mtchedlishvili
SEO Lead especializado en ecommerce y AI Search. Ayudo a negocios digitales a crecer en Google y en los nuevos entornos de búsqueda con IA.