Una 'araña de software' es un programa no tripulado operado por un motor de búsqueda que navega por la Web como lo haría usted. A medida que visita cada sitio web, registra (guarda en su disco duro) todas las palabras de cada sitio y anota cada enlace a otros sitios. A continuación, 'hace clic' en un enlace y lo apaga para leer, indexar y almacenar otro sitio web.
La araña de software a menudo lee y luego indexa el texto completo de cada sitio web que visita en la base de datos principal del motor de búsqueda para el que está trabajando. Recientemente, muchos motores como AltaVista han comenzado a indexar solo hasta un cierto número de páginas de un sitio, a menudo alrededor de 500 en total, y luego se han detenido. Aparentemente, esto se debe a que la Web se ha vuelto tan grande que no es factible indexar todo. La cantidad de páginas que indexará la araña no es del todo predecible. Por lo tanto, es una buena idea enviar específicamente cada página importante de su sitio que desea indexar, como aquellas que contienen palabras clave importantes.
Una araña de software es como un bibliotecario electrónico que recorta la tabla de contenido de cada libro en todas las bibliotecas del mundo, los clasifica en un índice maestro gigantesco y luego construye una bibliografía electrónica que almacena información sobre qué textos hacen referencia a qué otros textos. ¡Algunas arañas de software pueden indexar más de un millón de documentos al día! Es importante comprender que las arañas de los motores de búsqueda solo hacen dos cosas:
- Indizan texto.
- Siguen enlaces.
En una conferencia reciente sobre estrategias de motores de búsqueda organizada por SearchEngineWatch.com, uno de los oradores invitados, Shari Thurow de Grantastic Designs, hizo este punto y lo repitió varias veces para ilustrar su importancia: 'Los motores de búsqueda indexan texto y siguen enlaces. Indizan texto y siguen enlaces. Eso es todo lo que hacen.
Su punto es importante y fundamental para comprender la naturaleza de las arañas de los motores de búsqueda. Si el texto de su sitio web está contenido en un gráfico, los motores de búsqueda no pueden indexarlo. Si todas las palabras clave importantes para las que espera obtener una clasificación están incluidas en los gráficos, no en el texto HTML, su sitio no alcanzará las clasificaciones. Recuerde, los motores de búsqueda no indexan imágenes ni leen imágenes, indexan texto y siguen enlaces. Eso es todo. Si no tiene texto en su página visible, ninguna cantidad de palabras clave en su metaetiqueta de palabras clave lo ayudará a obtener clasificaciones.
Lo que ve la araña en su sitio determinará cómo se incluye su sitio en su índice. Los motores de búsqueda determinan la relevancia de un sitio basándose en un complejo sistema de puntuación que los motores de búsqueda tratan de mantener en secreto. Este sistema suma o resta puntos en función de cosas tales como cuántas veces apareció la palabra clave en la página, en qué lugar de la página apareció y cuántas palabras en total se encontraron. Las páginas que obtienen la mayor cantidad de puntos se muestran en la parte superior de los resultados de búsqueda; el resto está enterrado en el fondo, nunca se encontrará.
Cuando una araña de software visita su sitio, toma nota de los enlaces de su página a otros sitios. En la vasta base de datos de cualquier motor de búsqueda se registran todos los enlaces entre sitios. El motor de búsqueda sabe a qué sitios se vinculó y, lo que es más importante, a cuáles se vincularon a usted. Muchos motores incluso utilizarán la cantidad de enlaces a su sitio como una indicación de popularidad y luego aumentarán su clasificación en función de este factor.
Copyright © 2000 iProspect.com
