SEO

¿Qué es el Crawl Budget?

El crawl budget, según Google,  es el número de URL que GoogleBot quiere y puede rastrear en una página web. Para muchas páginas web el crawl budget no debería ser un problema, pero si tu web tiene miles de páginas entonces es algo que debería interesarte.

Internet es un lugar grande, casi inmenso, y los recursos de Google y los demás buscadores no son infinitos. Eso quiere decir que el bot de Google puede rastrear solo una parte de los contenidos presentes en la red y de esta parte solo un porcentaje será indexado. Por eso entran en juego muchos factores que determinan cuántos recursos dedica Google a tu página web.

Uno de estos factores es el crawl rate limit —el limite de velocidad de rastreo— que determina el numero de conexiones paralelas que Google empleará para rastrear la página y el tiempo que esperará para recuperar las páginas. Podemos deducir que, cuanto más rápido sea tu sitio web, mejor se indexará y subirá el valor del crawl rate limit.

Además hay que tener en cuenta que el Googlebot dará prioridad y rastreará con mas frecuencia las URL más “famosas” y actualizadas.

Para entender mejor el concepto de velocidad de rastreo puedes mirar la sección Estadísticas de rastreo de tu web en Google Search Console:

Estadísticas de rastreo

El primer gráfico nos dice el numero de páginas rastreadas al día y el tercero el tiempo de descarga de una página. Puedes comprobar fácilmente que a las fechas con menor tiempo de descarga se corresponden con un mayor numero de páginas rastreadas al día.

¿Qué afecta negativamente al crawl budget?

 Entre los factores que pueden reducir el rastreo de nuestra web, los más comunes son los siguientes:

  • Filtros indexables: es un problema difuso en las tiendas online que suelen ofrecer muchas opciones de búsqueda al usuario (por ejemplo talla, color, marca, etc., ya que generan una cantidad potencialmente infinita de URLs.  Es recomendable, en estas situaciones, valorar caso por caso si es necesario indexar tantos filtros y encontrar una solución para que el bot siga viendo todo el contenido presente en nuestra web.
  • Contenido duplicado dentro del mismo sitio web, es decir, dos o más URLs que proporcionan un contenido parecido. 
  • Errores de rastreo 5xx: estos errores son interpretados por el Googlebot como una señal de que nuestro servidor no tiene suficiente rendimiento para gestionar el rastreo, con lo cual disminuirá nuestro crawl budget. Revisa la sección en Google Search Console para identificar y solucionar estos errores. 

Cabe mencionar que el crawl budget no es un factor de posicionamiento, pero a pesar de ello sí es importante optimizarlo, sobre todo si tenemos una web con miles de URLs.

New Call-to-action

FacebookWhatsAppTwitterShare

Si te ha gustado este post...

Máster en Marketing Digital SEO

Wikipedia: ¿cómo beneficia al SEO?

57
Escrito por Teresa Oter
Sabemos que existen muchas técnicas para mejorar nuestro posicionamiento orgánico, pero en este post nos centraremos en cómo utilizar Wikipedia para conseguir esta mejora de nuestro posicionamiento. ¿Quieres averiguarlo? ¡Sigue leyendo!
SEO

Mejora tu CTR SEO con los fragmentos destacados de Google

29
Escrito por Gema Diego
Los fragmentos destacados son un tipo especial de resultado de búsqueda que Google muestra en ciertos casos en la parte superior de la página cuando el usuario expresa una pregunta concreta. Los estudios señalan que aparecer en este espacio incrementa notablemente el CTR, y existen algunas tácticas SEO que pueden ayudarte a conseguirlo. ¡Aquí te las contamos!
SEO

Canibalización de palabras clave: qué es y cómo prevenirla

47
Escrito por Ana Rodilla
La canibalización de palabras clave cada vez está más en auge dentro del marketing online. En este post vamos a aprender más sobre canibalización SEO con algunos de los ejemplos más comunes que nos encontramos en las webs, y daremos pautas para trabajar la canibalización y evitarla en un futuro. ¡Sigue leyendo!
ecommerce SEO

Búsqueda por voz: factores a tener en cuenta

56
Escrito por Juan Pina
La búsqueda por voz avanza muy deprisa, y sobre todo entre el segmento más joven de la población. Los expertos ya reclaman a empresas como Google o Amazon la opción de cribar las búsquedas realizadas por voz. No se detecta un comportamiento sustancialmente diferente de los usuarios al buscar por voz, pero sí hay cuestiones a tener en cuenta. En este artículo repasamos los principales factores que debemos considerar para adaptar nuestros sitios web a esta nueva realidad.
Ebooks de Marketing Digital SEO

Nuevo ebook sobre contenido semántico

4
Escrito por Mara Miguel
Las reglas del juego del SEO están en constante cambio, y los máximos responsables son el usuario y Google. Este nuevo ebook de Súmate Marketing Online te abre las puertas a la nueva realidad del contenido semántico, que ya es el rey en esta nueva era del SEO copywriting. Te animamos a descargártelo.
SEO

Cinco consejos básicos para optimizar el contenido

56
Escrito por Juan Pina
Al escribir el contenido de una página, tanto si se trata de un post en el blog de la empresa como de la información sobre un producto en el catálogo de tu ecommerce, debes tener en cuenta la difusión, y para ello es fundamental optimizar el contenido.
SEO

Mobile First en SEO, ¿también para el contenido?

29
Escrito por Gema Diego
Después de que Google lanzara la actualización ‘mobile-friendly’ de su algoritmo (el popular ‘Mobileggedon’) en abril de 2016, gran parte de los esfuerzos de los profesionales del SEO se han centrado en trabajar el posicionamiento web en el ámbito móvil. Para ello, se pueden llevar a cabo diversas acciones, como adaptar el contenido de cada página web o implementar AMP. Pero, ¿qué opción es mejor? Y, ¿merece siempre la pena efectuar este trabajo?
SEO

Búsquedas por voz y SEO: manual para 2017

29
Escrito por Gema Diego
Los asistentes de búsqueda por voz no son nada nuevo bajo el sol, pero este 2017 lo han comenzado pisando fuerte y con ganas de conquistar de una vez por todas a los usuarios de smartphones. ¿Quieres un consejo SEO inteligente? Comienza ya a optimizar tu sitio web para que, cuando tu público te busque por medio de una petición de voz, aparezcas dentro de los primeros resultados.

Comentarios

[…] último, y aunque el Crawl Budget no es un factor de posicionamiento SEO, también nos beneficiará a la hora de proporcionar a Google menos enlaces que rastrear y, por […]

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Cerrar
Cerrar

Selecciona una categoría

X