La respuesta a esto es NO.

Es simple, si uno desea que su sitio sea libremente leído por las arañas de los motores de búsqueda, no se necesita hacer nada más, el uso de robots.txt es necesario solo en el caso de que no queramos que esto suceda.

Lo cual no quiere decir que el uso del archivo robots.txt no sea útil. De hecho muchos optimizadores lo utilizan para controlar la lectura a páginas o directorios que los motores no deben tomar en cuenta dentro de un sitio Web, lo cual puede ser bastante útil para filtrar contenido duplicado, así como otros propósitos. Lo que definitivamente debe quedar claro, es que este no es un elemento requerido para alcanzar un mejor posicionamiento.

Compártelo