Indexation Google Wordpress répertoires wp-content et tous les fichiers internes
Récemment, j'ai remarqué que le nombre total de pages d'exploration a été augmenté. J'ai donc cherché sur Google en utilisant site: et obtenu plusieurs pages avec un répertoire wp-content. J'ai également consulté Google Search Console, et le nombre total de pages explorées a considérablement augmenté le 17 juin 2018:
Et à la même date, le trafic sur le site Web a chuté. Si je ne me trompe pas, Google a fouillé plusieurs pages indésirables dans le répertoire wp-content, ce qui pourrait être le problème principal. Veuillez voir cette capture d'écran (le trafic a commencé à diminuer le 16 juin 2018 ): 
Voici une capture d'écran du répertoire wp-content indexé:
Veuillez indiquer comment arrêter Google pour arrêter l'exploration du répertoire "wp-content" afin que les pages en double et vierges ne soient pas explorées et que, dans le même temps, elles ne soient pas affectées par l'exploration des pages d'origine.
Tout d'abord, vous devriez bloquer l'indexation par:
- robots.txt (en utilisant commande non autorisée )
- Configuration du fichier serveur. Si vous utilisez Apache, vous pouvez refuser l'accès aux dossiers/fichiers avec le fichier .htaccess (erreur 410).
Deuxièmement, commencez par supprimer les URL déjà indexées à partir de Google Index à l'aide de outil de suppression d'URL de Google
Malheureusement, l'outil ci-dessus ne vous permet de supprimer qu'un à un. Vous pouvez générer erreur 41 à ces URL (la deuxième option que j'ai commentée auparavant), mais gardez à l'esprit qu'il s'agit d'une configuration de serveur avancée, car vous souhaitez simplement empêcher l'indexation des URL, mais vous devez toujours accéder. eux en tant qu'administrateur.
Le problème est que votre serveur crée une page automatique pour tous les répertoires qui répertorie tous les fichiers de ce répertoire.
Dans Apache, cette fonctionnalité est fournie par mod_autoindex . S'il n'y a pas de fichier index.html dans le répertoire, ce module Apache créera automatiquement une page affichant une liste de répertoires.
Une façon de l'empêcher consiste à créer des fichiers index.html vides dans chaque répertoire. Google n'indexera pas les pages vierges. Cela les traiterait comme des pages "soft 404".
Une autre méthode consiste à désactiver les listes de répertoires. Cela peut être fait soit dans vos fichiers Apache . Conf ou dans vos . Htaccess fichier tant que AllowOverides est activé.
Options -Indexes
Pour plus d'exemples, voir la section "Répertoire" de https://wiki.Apache.org/httpd/DirectoryListings