Site Web non récupéré par Bingbot: erreur inattendue
Mon site web est en ligne depuis quelques années. C'est sur le premier résultat pour Google mais cela ne semble pas être indexé par Bing. J'ai essayé de chercher avec bing dans leurs outils de webmaster et il renvoie toujours "erreur inattendue". Si je supprime le fichier robots.txt, l'erreur est "impossible de télécharger le fichier robots.txt".
Bing a un document d'aide qui dit ce qui suit à propos de "Erreur inattendue":
Que signifie "Erreur inattendue"?
Si vous voyez fréquemment des "erreurs inattendues" avec Fetch en tant que Bingbot, cela peut indiquer que notre robot d'exploration ne peut pas se connecter à votre serveur et n'obtient pas du tout de réponse du serveur. Votre serveur peut bloquer involontairement Bingbot en fonction de l'agent utilisateur ou de la plage IP. Pour remédier à cela, recherchez les configurations de serveur ou les modules susceptibles d'interrompre les connexions pour Bingbot ou collaborez avec votre fournisseur de services Internet pour déterminer si le problème les concerne.
Vérifiez votre pare-feu. Votre hébergeur peut également disposer d'un pare-feu susceptible de bloquer les demandes.