Sitemap

Cuando un bot llega a una web le viene de perlas tener un mapa que le indique donde estan las paginas que debe indexar, esto pasa con los menus de navegacion escritos en todo tipo de lenguaje pero sobretodo si estan escritos en Javascript o Flash que no todos los robots indexan, siguiendo esta línea, el 6 de febrero del 2005, Shiva Shivakumar lanzo una nueva idea en el Blog de Google: nacía el Sitemap. El famoso buscador californiano lo fue perfeccionando y el 15 de noviembre del 2006 Google, Msn y Yahoo se unieron para desarrollarlo creando el sitio www.sitemap.org al cual se unió el año siguiente Ask aportando la idea de señalar el sitemap en el robots.txt. Después de ésto, estoy seguro que me creeréis si os digo que el sitemap és básico para la rápida indexación de vuestras páginas en los principales buscadores del web.

En Joomla hay un magnífico componente para vuestras sitemaps que se llama Xmap, tambien está Joomap que inspiró al anterior, ambos se ocupan de generar el sitemap y de ir actualizándolo con las páginas nuevas que se vayan publicando.

El lenguaje usual de los archivos para sitemaps és Xml, pero se puede usar una página escrita en feed RSS 2.0 o Atom 0.3 o 1.0. (que también usan lenguaje Xml) o un archivo de texto, el sitemap se puede guardar en la misma web o en otra distinta y, para decírle a los bots donde está, normalmente se pueden usar tres soluciones:

- El robots.txt: añadiendo la instrucción Sitemap: direcciondelapaginadelsitemap
- Informando al buscador (submission), podéis ir a la página apropiada de Google Webmaster Tools, de Yahoo! Site Explorer o de Webmaster center de Msn
- Por medio de un Ping, por ejemplo tecleando en vuestro navegador de Internet  http://www.google.com/webmasters/sitemaps/ping?sitemap=urldelapaginadelsitemap para que se entere Google o http://search.yahooapis.com/SiteExplorerService/V1/updateNotification?appid=YahooDemo&url=urldelapaginadelsitemap para que lo sepa Yahoo

Podéis usar el método (o métodos) que prefiráis, pero incluirlo en el robot.txt és seguramente el más cómodo y os aseguráis de no olvidaros ningún spider.