Robots.txt Editor

Descripción

Robots.txt es un editor visual para archivos de exclusión de robots y un software de análisis de registros. Permite que un usuario cree rápida y fácilmente los archivos robots.txt necesarios para instruir a las arañas de los motores de búsqueda, que son partes de un sitio web, que no deben ser indexadas y que el público en general puede buscarlas y luego identificar las arañas, que no siga esas instrucciones. El programa proporciona al usuario una forma de iniciar sesión en su FTP o servidor de red local y luego seleccionar los documentos y directorios que no se pueden buscar. Por medio de este programa podrá generar visualmente archivos robots.txt estándar de la industria; identifique arañas maliciosas y no deseadas y prohíbalas de su sitio; dirigir a los rastreadores de los motores de búsqueda a las páginas apropiadas para sitios multilingües; mantener a las arañas fuera de las áreas confidenciales y privadas de su sitio web; Rastree las visitas de arañas y más. Actualizaciones gratuitas del programa y actualizaciones sin restricciones en el tiempo; número ilimitado de sitios web para trabajar.