Presupuesto de rastreo (crawl budget)
El concepto de presupuesto de rastreo considera que los buscadores tienen recursos de rastreo limitados y no pueden rastrear al instante todas las páginas de la web.
¿Qué es el presupuesto de rastreo?
El concepto de presupuesto de rastreo (en inglés, crawl budget) considera que los buscadores tienen recursos de rastreo limitados y no pueden rastrear al instante todas las páginas de la web. Cuanto más popular es un sitio a los ojos de un buscador, con más frecuencia lo visitará y más tiempo y recursos dedicará a rastrearlo. El presupuesto de rastreo de Google describe cuánto tiempo y cuántos recursos dedica a rastrear un sitio. No todas las páginas rastreadas de tu sitio se indexarán: cada página debe evaluarse, consolidarse y valorarse para determinar si se indexa o no. Hay dos factores principales que determinan el presupuesto de rastreo: el límite de capacidad de rastreo y la demanda de rastreo.
- Límite de capacidad de rastreo: El objetivo de Googlebot es rastrear tu sitio sin sobrecargar tus servidores. Googlebot calcula un límite de capacidad de rastreo que determina el número máximo de conexiones simultáneas que puede usar para rastrear un sitio y el tiempo de espera entre cada solicitud.
- Demanda de rastreo: El tiempo que Google dedica a rastrear un sitio depende de su tamaño, la frecuencia de sus actualizaciones, su calidad y su relevancia.