web-dev-qa-db-fra.com

Robots.txt non mis à jour

Lorsque j'essaie de rechercher mon adresse Web sur Google, le suivi apparaît comme la méta-description

"La description de ce résultat n'est pas disponible en raison du fichier robots.txt de ce site. En savoir plus."

Le site Web J'ai essayé de modifier le fichier robots.txt (téléchargé le plugin WP Robot) et, bien que je l’aie changé en

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Le fichier robots.txt apparaît toujours sous la forme

User-agent: *
Disallow: /

J'ai Yoast SEO, WP Robots et le thème Nectar de Salient. Si quelqu'un pouvait me proposer une solution permettant de mettre à jour les robots (ou de savoir où aller à partir de maintenant), ce serait extrêmement utile!

seorobots.txt
5
Confused

Une fois que j'ai rencontré le même problème, voici ce que j'ai fait pour le résoudre.

Editez le fichier robots.txt directement (via FTP/SSH),

User-agent: * 
Disallow: /wp-admin/ 
Disallow: /wp-includes/

Il y a deux raisons pour lesquelles les fichiers de robots ne sont pas mis à jour lorsque vous les avez modifiés à l'aide d'un plugin.

  1. Autorisation de fichier.
  2. Un autre plugin annule les modifications.

Essayez également de mettre à jour les paramètres de visibilité du moteur de recherche (ce n'est peut-être pas un problème, mais jetez un coup d'œil).

Paramètres -> Lecture -> Visibilité dans les moteurs de recherche (décochez cette option) -> Enregistrer

J'espère que ça aide.

1
Nikhil

Un site WordPress n'a pas besoin d'un fichier robots.txt réel. WordPress lui-même interceptera les requêtes pour le fichier robots.txt et répondra avec sa propre version, et c'est ce que votre plugin tentera probablement de modifier.

Supprimez ou renommez votre fichier robots.txt actuel et essayez-le.

0
Dave Ross

Cela m'est arrivé aussi, essayez de "Purger tous les caches" sur les paramètres Wordpress/fournisseur de services d'hébergement.

Ensuite, pour vérifier, ouvrez un navigateur en mode "navigation privée" (chrome, assurez-vous de ne pas avoir déjà ouvert de fenêtre de navigation privée, sinon vous devrez toutes les fermer et rouvrir une nouvelle fenêtre de navigation privée), puis passez à autre chose. sur votre www.mydomain.com/robots.txt. Vous devriez maintenant pouvoir voir le fichier de contenu mis à jour comme prévu.

0
Gonen