Presupuesto de rastreo de Google para SEO, ¡DEJA de adivinar! (Información real aquí)

Publicado: 2021-07-13

Si desea que las páginas de su sitio web se indexen rápidamente, debe comprender el significado del presupuesto de rastreo para SEO.

Realmente afecta a todos los sitios, grandes y pequeños. Pero a menudo, los sitios grandes, los sitios con errores técnicos o los sitios con características únicas de generación de URL realmente deben prestar atención aquí.

¡Pero espera!

Me estoy adelantando. Empecemos un poco más lento.

Todo lo que necesita saber sobre un presupuesto de rastreo para SEO

Todo lo que necesita saber sobre un presupuesto de rastreo para SEO

El concepto de un presupuesto de rastreo fue una vez un juego de adivinanzas entre los SEO. Sin embargo, gracias a una publicación reciente de Gary Illyes de Google, ahora todos estamos mucho más informados.

En este artículo, cubriremos todo lo que necesita saber sobre un presupuesto de rastreo y ofreceremos algunos consejos de optimización.

¿Qué es un presupuesto de rastreo?

Antes de que pueda comprender el concepto de un presupuesto de rastreo para SEO, primero deberá familiarizarse con otro término: Googlebot.

Googlebot es el nombre que se le da al agente automatizado que rastrea su sitio en busca de páginas para agregar a su índice. Puede pensar en él como un internauta digital.

Dado que hay miles de millones de páginas en la web, no sería práctico para el robot de Google rastrearlas cada segundo de cada día. Hacerlo consumiría un valioso ancho de banda en línea, lo que resultaría en sitios web con un rendimiento más lento.

Por lo tanto, Google asigna un presupuesto de rastreo para cada sitio web. Ese presupuesto determina la frecuencia con la que Googlebot rastrea el sitio en busca de páginas para indexar.

Google define la misión del presupuesto de rastreo de la siguiente manera: "Priorizar qué rastrear, cuándo y cuántos recursos puede asignar el servidor que aloja el sitio web al rastreo es más importante para los sitios web más grandes o aquellos que generan páginas automáticamente según los parámetros de URL. , por ejemplo."

¿Por qué es importante la optimización del presupuesto de rastreo para SEO?

La respuesta a esto es fundamental y simple. Cuanto mejor se optimice un presupuesto de rastreo para indexar una página, más alto se clasificará en Google.

Es crucial asegurarse de que si tiene un sitio grande, específicamente comercio electrónico, o ha agregado muchas páginas o tiene muchas páginas redirigidas, tenga la capacidad de rastreo de presupuesto para manejarlo.

Sin embargo, esto no debería ser una gran preocupación, ya que Google rastrea las páginas indexadas de manera eficiente, pero ciertamente es algo a tener en cuenta.

Límite de frecuencia de rastreo

El límite de frecuencia de rastreo es un poco diferente al presupuesto de rastreo. Define cuántas conexiones simultáneas utiliza el robot de Google para rastrear un sitio y el tiempo que esperará antes de obtener otra página.

Recuerde, Google tiene que ver con la experiencia del usuario. La razón por la que su bot utiliza un límite de velocidad de rastreo es para evitar que un sitio sea invadido por agentes automatizados hasta tal punto que los usuarios humanos tengan problemas para cargar el sitio en sus navegadores.

cambiar la frecuencia de rastreo

A continuación, se muestran algunos factores que afectan la frecuencia de rastreo:

  • Velocidad del sitio web : si un sitio responde rápidamente al robot de Google, Google aumentará la tasa de límite de rastreo. Por otro lado, Google reducirá la frecuencia de rastreo de los sitios web lentos.
  • Configuración en Search Console : los webmasters también pueden establecer el límite de rastreo en Search Console. Si bien no pueden aumentar la frecuencia de rastreo, pueden disminuirla si creen que Google está rastreando demasiado su servidor.

Tenga en cuenta que, si bien una tasa de rastreo saludable puede hacer que las páginas se indexen más rápido, una tasa de rastreo más alta no es un factor de clasificación.

configuración de la frecuencia de rastreo

Demanda de rastreo: presupuesto de rastreo para SEO

Incluso si no se alcanza el límite de rastreo, Google podría reducir la cantidad de páginas que rastrea su bot. La disminución de la actividad del bot se denomina reducción de la demanda de rastreo.

¿Qué afecta la demanda de rastreo? Hay un par de cosas:

  • Popularidad : las páginas que son más populares (es decir, se comparten mucho en las redes sociales y reciben enlaces de otros sitios web) tienden a rastrearse con más frecuencia.
  • Vigencia : Google intenta evitar que las URL se vuelvan obsoletas en su índice.

Además, los eventos en todo el sitio (como el traslado de un sitio) pueden generar un aumento en la demanda de rastreo. Eso es porque Google necesita volver a indexar el contenido con las nuevas URL.

¿Qué afecta el presupuesto de rastreo? - Presupuesto de rastreo para SEO

Básicamente, el presupuesto de rastreo es una combinación de la frecuencia de rastreo y la demanda de rastreo. Según Illyes, el presupuesto de rastreo es la cantidad de URL que el robot de Google puede y quiere rastrear.

Afortunadamente, Google ha identificado exactamente qué factores afectan el presupuesto de rastreo. Aquí hay una lista de ellos, clasificados por orden de importancia:

  • Parámetros de URL : a menudo ocurre que una URL base (por ejemplo, "http://mysite.com") agregada con parámetros (por ejemplo, "http://mysite.com?id=3") devuelve exactamente lo mismo. página. Ese tipo de configuración podría dar como resultado que numerosas URL únicas se contabilicen para el presupuesto de rastreo, aunque todas esas URL devuelvan la misma página.
  • Contenido duplicado : en algunos casos, las URL pueden ser totalmente únicas sin parámetros de solicitud y aún así devolver el mismo contenido. Eso también afectará negativamente al presupuesto de rastreo.
  • Páginas de error suave: las páginas de error 404 suave también afectan el presupuesto de rastreo. Afortunadamente, también se informan en Search Console.
  • Páginas pirateadas : los sitios que han sido víctimas de piratas informáticos pueden ver limitado su presupuesto de rastreo.
  • Espacios infinitos : los sitios que tienen enlaces ilimitados (como calendarios en los que los usuarios pueden hacer clic en un día, mes o año) encontrarán que el robot de Google desperdicia su presupuesto de rastreo en enlaces que pueden no ser importantes.
  • Contenido de baja calidad : si el sitio tiene mala calidad, es probable que Google limite el presupuesto de rastreo.

Cómo optimizar su presupuesto de rastreo

Ahora que está familiarizado con el concepto de un presupuesto de rastreo para SEO, es hora de optimizar su sitio en consecuencia. Aquí hay varias formas de hacerlo.

1. Utilice herramientas gratuitas

- Tanto la Consola de búsqueda de Google como las Herramientas para webmasters de Bing le brindan mucha información sobre problemas que podrían afectar negativamente su presupuesto de rastreo. Asegúrese de usarlos y configurarlos para todos los sitios que está monitoreando.

Luego, vuelva a consultar esas herramientas de vez en cuando para ver si sus sitios están experimentando algún problema. Por ejemplo, si Search Console informa que uno de sus sitios tiene algunos errores suaves 404, asegúrese de solucionar ese problema de inmediato.

Recuerde, tanto Google como Microsoft quieren que tenga éxito en línea. Es por eso que brindan esas herramientas de forma gratuita.

2.Asegúrate de que tus páginas se puedan rastrear

- Es tentador aprovechar las maravillas de la tecnología moderna hasta tal punto que dificulta que el robot de Google rastree su sitio. Resista esa tentación.

Por ejemplo, la tecnología como AJAX (JavaScript asíncrono y XML) carga contenido para que los usuarios no tengan que actualizar la página. Sin embargo, es posible que el robot de Google no pueda acceder al contenido cargado por AJAX. Este es un gran tema que genera spam más allá de los cambios de rastreo de SEO, por lo que lo guardaremos para otra publicación. Pero básicamente, necesitas tener una base HTML.

Además, use un mapa del sitio y asegúrese de que esté siempre actualizado. Afortunadamente, los sistemas de gestión de contenido como WordPress facilitan hacerlo.

3. Limitar redirecciones

- Cada vez que una de las páginas de su sitio redirige a otra página (con un redireccionamiento 301 o 302), utiliza una pequeña parte de su presupuesto de rastreo. Eso significa que si tiene muchos redireccionamientos, su presupuesto de rastreo podría agotarse antes de que Googlebot rastree la página que desea indexar.

4. Elimina los enlaces rotos

- Si tiene muchos enlaces rotos en su sitio, deberá limpiarlos si desea maximizar su presupuesto de rastreo.

Afortunadamente, es fácil encontrar enlaces rotos con una herramienta como Screaming Frog. Además, asegúrese de consultar con Google Search Console y Bing Webmaster Tools de vez en cuando.

5. Evite el uso de parámetros de URL

- Como hemos visto, puede consumir una parte significativa de su presupuesto de rastreo con diferentes parámetros de URL que apuntan a la misma página. Puede eliminar ese problema, por supuesto, eliminando los parámetros de URL por completo.

Por ejemplo, si está ejecutando un sitio de comercio electrónico, puede usar la siguiente URL para mostrar un producto específico: http://mysite.com/shop?productId=5. En su lugar, cambie esa URL a http://mysite.com/shop/productId5 así que algo así. Al hacerlo, eliminará al menos un parámetro de solicitud.

Si debe utilizar parámetros de solicitud, asegúrese de decirle a Google cómo manejar esos parámetros en la Consola de búsqueda. Simplemente haga clic en "Rastrear" en la barra lateral izquierda y seleccione "Parámetros de URL" en el menú que aparece. En esa página, puede editar sus sugerencias y agregar nuevos parámetros para que Google no indexe páginas duplicadas. Esto cambiará su presupuesto de rastreo para SEO. Pero tenga mucho cuidado aquí, el parámetro incorrecto puede destruir su sitio web.

6. Utilice enlaces internos

- Podría decirse que uno de los aspectos del SEO que más se pasan por alto hoy en día son los enlaces internos. Sin embargo, tenga en cuenta que, por lo general, es mejor vincular internamente a sus páginas más rentables. De esa forma, Googlebot verá esas páginas con más frecuencia.

7. Utilice enlaces externos

- Un estudio reciente muestra que existe una correlación entre los enlaces externos y la cantidad de veces que el robot de Google rastrea un sitio. Por eso es importante que los enlaces externos apunten a su sitio.

Va más allá del alcance de este artículo analizar todas las formas en que puede crear enlaces externos. Vea esta lista completa de estrategias de backlinking para obtener más información.

8. Mejore la velocidad de su servidor

- Es importante realizar una investigación previa a la venta antes de seleccionar un proveedor de alojamiento. Eso es porque desea un host que responda muy rápidamente a las solicitudes del servidor.

Cuanto más rápido responda su servidor a una solicitud de página, más páginas rastreará el robot de Google.

9. Guarde sus páginas en caché

- Hablando de velocidad, es una gran idea almacenar en caché sus páginas web. Se cargarán más rápido no solo para los usuarios, sino también para el robot de Google, lo que le dará a su sitio un aumento en el límite de frecuencia de rastreo.

Afortunadamente, es fácil almacenar páginas en caché en una plataforma de WordPress con el complemento W3 Total Cache o el complemento Super Cache.

10. Optimizar la velocidad de carga de la página

- Una vez que haya puesto su sitio en un servidor rápido y haya almacenado en caché sus páginas, es posible que aún no haya terminado con la optimización de la velocidad. Dirígete a la herramienta PageSpeed ​​Insights y mira lo que piensa Google sobre la velocidad de tu página.

Puede encontrar que todavía hay algunos problemas en su sitio que impiden que sus páginas se carguen lo más rápido posible. Por ejemplo, es posible que tenga JavaScript o CSS que bloqueen la representación en sus páginas.

prueba de velocidad del sitio

Afortunadamente, Google no solo le dice qué está mal en su sitio, sino también cómo solucionar los problemas identificados.

Resumiendo el presupuesto de rastreo para SEO

Ahora sabe un poco más sobre los presupuestos de rastreo, la optimización de motores de búsqueda y cómo afecta a su sitio.

¿Por qué no tomarse un tiempo hoy para implementar un plan de acción para optimizar su presupuesto de rastreo? Esto puede ser realmente útil para sitios web grandes y, a menudo, conduce a solucionar muchos otros problemas fuera del rastreo.