Obtendrás una comprensión de los rastreadores de búsqueda y cómo presupuestar de manera óptima para ellos.
0:05 Optimización del crawl budget y su importancia
1:03 Factores que afectan el crawl budget
1:29 Accesibilidad
1:49 Eficiencia
1:54 Vistas de página
2:08 Tasa de rastreo
2:42 Objetivos para la optimización del crawl budget
3:27 Usa Google Search Console
✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹
Te podría resultar útil:
Mejora el enlazado interno de tu sitio web con la herramienta Site Audit:
Entiende cómo los bots de Google interactúan con tu sitio web utilizando el Log File Analyzer:
Aprende a usar SEMrush Site Audit en nuestro curso gratuito:
✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹ ✹
Uno de los aspectos más importantes y complejos del SEO es cómo controlar adecuadamente los rastreadores de búsqueda y cómo manejar lo que llamamos crawl budget. ¿Por qué es esto importante?
La razón principal es que rastrear es muy costoso. Por ejemplo, uno de los centros de datos más recientes que Google construyó en los Países Bajos costó alrededor de 770 millones de dólares estadounidenses.
Los costos operativos también son altos: más de 10 mil millones de USD cada año.
Así que mucho dinero se destina al rastreo y esa es la razón por la cual Google necesita aplicar presupuestos. Sus recursos de rastreo deben ser utilizados de manera eficiente y económica. Los recursos se proporcionan en unidades de “tiempo de computación del centro de datos” por dominio, por lo que, en esencia, la optimización del crawl budget tiene como objetivo ayudar a Google a lograr más con menos.
Diferentes factores impactan el crawl budget, por ejemplo:
la antigüedad del dominio (es decir, cuanto más antiguo, mejor)
el perfil de enlaces, que refleja la autoridad y confiabilidad de un dominio. Cuanto más fuerte sea el perfil general, más presupuesto podrás obtener.
El tamaño del dominio (en cuanto a la cantidad de URLs)
También la frescura del contenido (por ejemplo, la cantidad de contenido nuevo)
Para un rastreo de primera clase, la accesibilidad es importante. Debes asegurarte de que todos los enlaces sean realmente legibles y alcanzables, y que estés utilizando códigos de estado HTTP adecuados. El contenido importante debe ser priorizado sobre el material menos importante para que sea rastreado primero. Por último, se debe prestar atención a la eficiencia. Esto significa que no debe haber páginas duplicadas o delgadas. La velocidad de la página es otro factor importante a considerar. En términos generales, cuanto más URLs puedas servir a gran velocidad, más efectivo serás al asignar el tiempo de computación del centro de datos de Google.
Veamos también rápidamente qué significa realmente la tasa de rastreo. Una definición adecuada sería: El número de solicitudes de rastreo (accesos) por parte del rastreador de un motor de búsqueda (Google) en un cierto período (24 horas) en un dominio o dentro de un directorio.
A continuación, definamos algunos objetivos potenciales para la optimización del crawl budget:
Queremos que el dominio sea rastreado de la manera más exhaustiva posible, por lo que queremos que Google encuentre todo nuestro contenido.
Los cambios deben ser detectados rápidamente. Debemos asegurarnos de que el contenido que producimos será encontrado lo antes posible. Y si actualizas ese contenido, quieres que Google lo identifique lo antes posible también. Digamos que actualizaste un precio de un producto en tu tienda: esto debería reflejarse en los SERPs de Google lo antes posible.
Otro punto es que los recursos deben trabajar de manera económica y eficiente, lo que significa que quieres asegurarte de que Google maneje tu infraestructura de servidor de la mejor manera posible.
Por último, se trata de utilizar tu infraestructura de servidor de manera económica; si Google rastrea un montón de cosas irrelevantes en tu dominio, esto esencialmente te cuesta dinero.
Un buen punto de partida es usar Google Search Console. Ve a la pestaña de estadísticas de rastreo: esto proporciona información sobre cuántas páginas se están rastreando por día; puedes usar esta información como base y mantener un ojo en la tendencia.
Ten en cuenta: Dependiendo del tamaño del dominio, el impacto puede diferir. Si el dominio es relativamente pequeño, digamos que tiene 100 o 1,000 URLs, el impacto es claramente menos significativo que en el caso de un dominio con 100,000 URLs o más. Google confirma esto en su blog de Webmaster Central: “Desperdiciar recursos del servidor en páginas [...] drenará la actividad de rastreo de páginas que realmente tienen valor, lo que puede causar un retraso significativo en el descubrimiento de gran contenido en un sitio”.
En última instancia, asegúrate de saber qué tipo de contenido existe en tu dominio y decide si quieres que sea indexado y/o rastreado. Si no, hay varios tipos de directivas y reglas que puedes aplicar para asegurarte de que no rastreen ni indexen el contenido. Simplemente sigue adelante con este capítulo.
#SEOtécnico #CursoSEOtécnico #OptimizacióndelCrawlBudget #SemrushAcademy