Al principio cuando MSN fue lanzado utilizaban un único robot llamado “msnbot”, este realizaba todas las tareas de indexación : páginas, imágenes, noticias, etc. Ahora MSN ha asignado un nombre único para cada robot depende de su función.

Por ejemplo para MSN Shopping se ha asignado “msnbot-products”, para MSN News “msnbot-news”, para el motor de búsqueda de imágenes ” msnbot-media”. Esto es importante para cualquier SEO ya que ahora podrá definir en el archivo de robots.txt si se desea por ejemplo que “msnbot-media” indexe las imágenes o no.

¡Compártelo!