Diario del motor de búsqueda
Una vez que ha extraído el contenido de la página, el rastreador lo coloca en el índice de las páginas visitadas y organiza toda la información. La información se utiliza entonces para medir la relevancia de la página en comparación con otras similares.
En las SERP es donde un consultor SEO puede mostrar a sus clientes los resultados de su trabajo. Una vez que un usuario introduce una palabra clave en la barra de búsqueda, el motor de búsqueda busca en su índice las páginas que coinciden con la consulta de búsqueda.
El motor de búsqueda también tiene en cuenta el contexto. Extrae toda la información relevante del usuario que teclea una consulta, comprendiendo los factores sociales, históricos y ambientales en juego y proporcionando la respuesta más útil. Estos factores son, por ejemplo, la posición, la hora, el tipo de consulta.
Desarrollo de motores de búsqueda
Utilizo métodos más rápidos cuando he optimizado una página crítica o he ajustado el título y/o la descripción para mejorar los clics. Quiero saber específicamente cuándo fueron recogidos y mostrados en las SERPs para saber dónde empieza la medición de la mejora.
Si tienes una pequeña peluquería, tienes un par de docenas de enlaces y, con razón, no se te considera importante en este contexto (puede que seas un barbero importante en la zona, pero no eres importante cuando se trata del presupuesto de rastreo), entonces el presupuesto será bajo.
¿Qué es un crawler?
Los rastreadores de los motores de búsqueda, también llamados arañas, robots o simplemente bots, son programas o scripts que exploran sistemática y automáticamente las páginas de la web. El objetivo de esta navegación automatizada suele ser leer las páginas que el rastreador visita para añadirlas al índice del motor de búsqueda.
Dado que la web moderna contiene varios tipos de contenido y los motores de búsqueda tienen formas de buscar específicamente ese tipo de contenido, los mayores motores de búsqueda tienen rastreadores dedicados a rastrear tipos específicos de páginas o archivos. Estos campos incluyen:
A nivel práctico, el “rastreo” se produce cuando un rastreador recibe una URL para comprobarla, obtiene la página y la almacena en un ordenador local. Puede hacerlo usted mismo yendo a una página, haciendo clic con el botón derecho del ratón y pulsando “Guardar como…”.
Una vez que la página ha sido obtenida, almacenada y analizada, la información extraída de ella se guarda en el índice del motor de búsqueda. Cuando alguien utiliza una consulta en una búsqueda, la información del índice se utiliza para determinar las páginas relevantes para esa consulta.
Optimización de los motores de búsqueda
Aunque los detalles del proceso son en realidad bastante complejos, conocer los fundamentos (no técnicos) del rastreo, la indexación y la clasificación puede ponerle en camino de comprender mejor los métodos que hay detrás de una estrategia de optimización de motores de búsqueda.
Los motores de búsqueda tienen rastreadores (también conocidos como arañas) que “rastrean” la World Wide Web para descubrir las páginas que existen con el fin de ayudar a identificar las mejores páginas web para ser evaluadas para una consulta. El método de desplazamiento por el que viajan las arañas son los enlaces de sitios web.
Estos enlaces de sitios web unen las páginas de un sitio web y los sitios web de toda la red, y al hacerlo, crean una vía para que los rastreadores lleguen a los billones de páginas web interconectadas que existen.
Los rastreadores no se dedican a la búsqueda de sitios web, sino que comienzan con un conjunto de sitios web de confianza que les sirve de base para determinar cómo se comportan otros sitios web y, siguiendo los enlaces que ven en las páginas que visitan, amplían su rastreo por toda la web.
La indexación es el acto de añadir información sobre una página web al índice de un motor de búsqueda. El índice es una colección de páginas web -una base de datos- que incluye información sobre las páginas rastreadas por las arañas de los motores de búsqueda.