Podemos evitar que las arañas web o robots rastreadores de contenido, rastreen los diversos Scripts de Themes y Plugins instalados en nuestro WordPress, además de otros archivos que no nos interesa que se indexen.
Añadiendo las siguientes líneas al archivo robots.txt ubicado en el raíz de nuestro WordPress, impedimos que las arañas web rastreen los directorios y archivos indicados:
User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/themes/ Disallow: /*.js$ Disallow: /*.css$ Disallow: /xmlrpc.php Disallow: /wp-config.php |
Espero que este artículo os haya sido de utilidad. Si pensáis que podéis colaborar para mejorar este artículo, que hay algo erróneo en él o simplemente deseáis comentarlo, por favor, dejad vuestra opinión más abajo.
Configuración de privacidad y de cookies.
Deja una respuesta