Segmentación del Presupuesto de Rastreo Enterprise en BigQuery
Revisar muestras pequeñas oculta fugas reales de rastreo. Analiza cada petición verificada en BigQuery SQL por plantilla y código HTTP.
Dmitry K., Technical SEO Lead · SEO Space
Objetivos técnicos de referencia
- Retención logs
- 90–180 días
- Verificación bot
- ASN / rDNS oficial
- Cuota páginas clave
- > 75% de golpes
Captura completa de logs Edge sin muestreo
Los portales amplios generan millones de peticiones semanales imposibles de revisar manualmente. Transmitir Cloudflare Logpush hacia BigQuery permite cruzar cada visita de Googlebot con Search Console.
Filtra siempre mediante validación DNS inversa y rangos ASN oficiales para aislar bots genuinos frente a scrapers.
SELECT
REGEXP_EXTRACT(ClientRequestURI, r'^(/[^/?]+)') AS root_dir,
EdgeResponseStatus AS status,
COUNT(*) AS bot_hits
FROM cdn_logs.verified_bots_daily
WHERE EdgeStartTimestamp >= TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 30 DAY)
GROUP BY 1, 2
ORDER BY bot_hits DESC; Medición de desperdicio por estado HTTP y parámetros
Clasifica las peticiones entre canónicas 200 OK útiles, rutas noindex, saltos 301/302, errores 404/410 y fallos 5xx. Cualquier directorio que supere el 15% en rutas no indexables exige limpieza.
- Cruza logs frente al XML Sitemap para detectar URLs huérfanas rastreadas.
- Vigila el TTFB medio: latencias sobre 600 ms reducen el rastreo concurrente.
- Separa agentes móviles de escritorio para validar paridad mobile-first.
Alertas automáticas semanales sobre desviaciones de rastreo
Automatiza vistas SQL semanales que notifiquen caídas > 20% en secciones comerciales prioritarias.
| Cohorte | Cuota saludable | Acción |
|---|---|---|
| Canónicas 200 OK | > 75% | Revisar enlazado interno si desciende |
| Cadenas 301 / 302 | < 5% | Actualizar enlaces de plantilla a destino final |
| Errores 5xx / 429 | < 0.2% | Ampliar caché Edge y revisar WAF |
¿Quieres auditar la indexación real de tu dominio?
Envíanos tu URL y revisamos paridad HTML, logs, canónicas y arquitectura de sitemaps en 24 horas.