Muchas páginas web se encuentran en los últimos lugares de las listas de resultados de los motores de búsqueda ó sencillamente no están. Y la razón fundamental es el desconocimiento de la forma como trabajan los motores de búsqueda, y los criterios de selección que utilizan.
Cuando necesitamos dar de alta una página web debemos considerar y diferenciar: los motores de búsqueda, y los directorios.

Los motores de búsqueda. Como HotBot indexan las páginas automáticamente, rastrean la web y construyen sus propias listas, las que son consultadas por los usuarios.
Estos programas conocidos como spiders o arañas, actualizan constantemente su base de datos, que contiene millones de páginas web indexadas.

En el caso de los motores de búsqueda el objetivo no es lograr que indexen la página web, cosa que es fácil después que invitamos al programa a visitar el sitio web, si no lo ha hecho ya. Lo difícil es colocar el sitio web dentro de los 40 primeros lugares de resultados de búsqueda del usuario.

¿Cómo lograr este objetivo?
Los títulos de las páginas o palabras encontradas en el texto, juegan un rol en la selección.

La página web dada de alta en estos motores, únicamente será encontrada y aparecerá en la lista de los resultados del motor de búsqueda, si la palabra que busca el usuario coincide con alguna palabra que se incluyó en el texto de la página web o en las metatags.

Los motores de búsqueda constan de tres partes: el spider que rastrea la web en busca de páginas nuevas o de cambios en las ya existentes; el catálogo que es una especie de libro gigantesco donde son colocadas las páginas web; y el motor de búsqueda que es el programa que selecciona determinadas páginas web que considera más relevantes en relación con las palabras de búsqueda del usuario.

¿Cuál es el criterio de relevancia? Uno es la localización y el otro es la frecuencia. Si la palabra que el usuario esta buscando es por ejemplo: "vacaciones". Las páginas más relevantes serán las que contengan la palabra "vacaciones" en el título, en los encabezados y en el texto.

¿Todos los motores de búsqueda tienen los mismos criterios? No.

Por ejemplo Excite utiliza las referencias de popularidad, si la página web que se pretende dar de alta está indexada por otras páginas aumenta su relevancia.

HotBot e Infoseek toman en cuenta las metatags como criterio para indexar una página, y en cambio Lycos no le da importancia. También los motores de búsqueda utilizan la penalización, esto es la exclusión de las páginas de sus catálogos, cuando detectan que una palabra ha sido repetida muchas veces para aumentar la frecuencia y por tanto la relevancia de la página web.

Ciertos sitios se arriesgan al utilizar esta práctica colocando al final de la página texto repetido, el cual disfrazan empleando tamaños de letras difíciles de leer ó con el mismo color de fondo de la página web. Poco perceptible para el lector de la página no así para los spiders de los motores de búsqueda.

¿Que son las metatags?
Son palabras claves que ayudan a describir la página web, y son visibles solamente para los programas de búsqueda y cuando vemos con el navegador la programación de la página.
En las páginas web que contienen marcos, ó que no contienen el texto suficiente que las describa, juegan un papel importante ya que constituyen la única fuente de información acerca de la página y su contenido.

Existen dos importantes metatags que es recomendable incluir en todas las páginas y son: keywords y description.
Metatag description crea un resumen de la página y la coloca en la lista de resultados de la búsqueda, a continuación del enlace de la página. Este resumen es el que ve el usuario y le permite decidir si visita o no la página web. Es importante no exceder de 25 palabras la descripción.

Metatag keywords crea las palabras claves que la máquina de búsqueda va a asociar con la página web. También es recomendable no pasar de las 256 palabras. Y como lo anotamos anteriormente juegan un papel importante en los motores de búsqueda como Altavista, Excite, HotBot.
No todos los motores de búsqueda toman en cuenta las metatags, por ejemplo Lycos y Google, no lo hacen. Por lo que incluirlas no es garantía para que la página sea indexada en todas las máquinas de búsqueda.

Al dar de alta una página web es recomendable que la página incluya metatags de descripción (description) y palabras claves (keywords) dentro del código HTML, para aumentar la relevancia en los motores de búsqueda que las toman en consideración.

Al elaborar la lista de las palabras claves debe tomar en cuenta las siguientes preguntas:
¿Cuál es el objetivo principal de su página?
¿Porqué es valiosa la información que proporciona?
¿A quién va dirigida?

Los directorios. Son manejados por humanos, los que deciden si una página es incluida o no en su base de datos. Los criterios de selección para los directorios son principalmente el que sea un buen sitio con buen contenido.

El catalogador de un directorio se guiará para incluir un sitio web por la descripción del mismo, de allí la importancia de esta, al momento de solicitar el alta. En algunos casos los sitios son revisados, pero en otros la descripción puede ser suficiente para catalogarlo.

Existen varios tipos de directorios, desde los generales de los portales hasta los especializados y enfocados a un mercado específico. Yahoo es uno de los directorios más importantes y el más antiguo, pero también de los más difíciles de ingresar. Cada uno de los directorios tiene su propia política de inclusión de sitios, así que es recomendable revisar la página que contiene esta información antes de dar de alta el sitio web.

Motores de búsqueda híbridos. Son aquellos que tienen asociados un directorio. Pero el que una página web se encuentre en las listas del motor de búsqueda no significa necesariamente que la van a incluir en el directorio asociado. A veces depende de la calidad del sitio y un poco de suerte.