Rastreo y Logs Actualizado 2026-11-16 3 min Googlebot · Bingbot · BigQuery

Segmentación del Presupuesto de Rastreo Enterprise en BigQuery

Revisar muestras pequeñas oculta fugas reales de rastreo. Analiza cada petición verificada en BigQuery SQL por plantilla y código HTTP.

Dmitry K., Technical SEO Lead · SEO Space

Objetivos técnicos de referencia

Retención logs
90–180 días
Verificación bot
ASN / rDNS oficial
Cuota páginas clave
> 75% de golpes

Captura completa de logs Edge sin muestreo

Los portales amplios generan millones de peticiones semanales imposibles de revisar manualmente. Transmitir Cloudflare Logpush hacia BigQuery permite cruzar cada visita de Googlebot con Search Console.

Filtra siempre mediante validación DNS inversa y rangos ASN oficiales para aislar bots genuinos frente a scrapers.

SELECT
  REGEXP_EXTRACT(ClientRequestURI, r'^(/[^/?]+)') AS root_dir,
  EdgeResponseStatus AS status,
  COUNT(*) AS bot_hits
FROM cdn_logs.verified_bots_daily
WHERE EdgeStartTimestamp >= TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 30 DAY)
GROUP BY 1, 2
ORDER BY bot_hits DESC;

Medición de desperdicio por estado HTTP y parámetros

Clasifica las peticiones entre canónicas 200 OK útiles, rutas noindex, saltos 301/302, errores 404/410 y fallos 5xx. Cualquier directorio que supere el 15% en rutas no indexables exige limpieza.

  • Cruza logs frente al XML Sitemap para detectar URLs huérfanas rastreadas.
  • Vigila el TTFB medio: latencias sobre 600 ms reducen el rastreo concurrente.
  • Separa agentes móviles de escritorio para validar paridad mobile-first.

Alertas automáticas semanales sobre desviaciones de rastreo

Automatiza vistas SQL semanales que notifiquen caídas > 20% en secciones comerciales prioritarias.

Cohorte Cuota saludable Acción
Canónicas 200 OK > 75% Revisar enlazado interno si desciende
Cadenas 301 / 302 < 5% Actualizar enlaces de plantilla a destino final
Errores 5xx / 429 < 0.2% Ampliar caché Edge y revisar WAF

¿Quieres auditar la indexación real de tu dominio?

Envíanos tu URL y revisamos paridad HTML, logs, canónicas y arquitectura de sitemaps en 24 horas.