Si quieres saber el funcionamiento de un buscador, antes debes saber como actúan los spiders y las partes en las que se componen.

El spider es un robot el cual se encarga de acceder a las páginas web en busca de contenido y enlaces. Los grandes buscadores tales como Google, Yahoo, Lycos, Msn, cuentan con una cantidad importante de spiders que van accediendo de forma aleatoria en los sitios web.

La visión del spider es únicamente de tipo texto, con esto quiero decir que tanto las imágenes como contenidos flash o de tipo ocx compilados y similares, no son registrados ni escaneados por el buscador.

Cada spider consta de una base de datos que viene a ser un backup del código html de las páginas rastreadas. Estas bases de datos se encargan de realizar sus propios esquemas de cada sitio web mediante índices, para aportar mayor rapidez al acceso de las páginas.

Construye tablas y combinaciones de palabras cuya función es conseguir las mejores páginas y explorar los contenidos de todo el texto. De tal forma se evita tener que rastrear todas y cada una de las páginas del buscador.

Otra función elemental de la que se encarga el spider es mostrar mediante un programa la visualización de todas las páginas indexadas, generando páginas en formato html con los resultados de la búsqueda que se haya realizado.

Cuando nosotros realizamos una búsqueda, el spider se encarga de consultar en todas las páginas de la base de datos mediante una serie de algoritmos realmente complicados.

Los resultados obtenidos serán mostrados en el orden que el spider haya considerado con más relevancia basándose en las palabras clave de dicha búsqueda.

Las posiciones de los resultados varían con frecuencia dependiendo de las estadísticas. Con esto me refiero que si al realizar una búsqueda en concreto y el primer resultado que se obtiene no satisface las necesidades de los usuarios que están buscando sobre esas palabras clave, esa página web en concreto irá disminuyendo de posiciones.