3 Servicios para crear archivos robots.txt

Yo tengo varios blogs, y en todos ellos tengo archivos Robots.txt. Son muy importantes por que con ellos se les puede indicar a los buscadores que queremos que indexen de nuestros sitios y que no, y algunas otras funciones más.

Por eso te dejaré una pequeña lista con 3 utiles generadores de robots.txt

Mcanerin cuenta con una excelente aplicación que genera archivos para robots, donde se puede expecíficar cuales son las carpetas que deseamos que se y el tiempo máximo que queremos que los robots naveguen por ellas.

Frobee.com sirve para validad un archivo robots.txt, para ver si sirve realmente o está bien hecho y así podes enviarselo a los robots.

En invision-graphics.com también cuentan con una aplicacion que genera archivos robots.txt, y cuenta con las mismas  funciones que la primera aplicación.

Concluyendo, los Robots.txt sirven para evitar cualquier tipo de problema con los buscadores.

Fuente: Wwwhatsnew

Dejar comentario