Après modification du nom de domaine, l'index de Google indique que les pages sont bloquées par le fichier robots.txt malgré Autoriser: /
Il y a deux semaines, j'ai changé l'adresse de mon site. J'ai oublié de renouveler mon domaine et pendant quelques jours, mon site était inaccessible. Cela a conduit Google à indexer mon site de manière incorrecte. Il y a une erreur robot.txt sur les résultats de recherche de mon site Web. A description for this result is not available because of this site's robots.txt.
Ceci est mon fichier robots.txt:
User-agent: *
Allow: /
J'ai déjà forcé Google à indexer mon site via des outils pour les webmasters.
EDIT: Cela ne fonctionne pas seulement avec certains messages
Le format standard pour un fichier robots.txt, autorisant tout, serait
User-Agent: *
Disallow:
Il vous suffit d'utiliser Allow pour remplacer une règle Disallow. Je suggérerais de faire le changement; Google peut mettre jusqu'à un jour pour mettre à jour la version en cache robots.txt.