approche sitemap.xml sur un site non indexé
Sur un site contenant un fichier robots.txt qui interdit toute exploration ...
User-agent: *
Disallow: /
... le contenu sitemap.xml importe-t-il? Vaut-il mieux ou a-t-il un impact sur les requêtes si sitemap.xml renvoie 404, 403 ou un fichier XML vide?
De https://support.google.com/webmasters/answer/156184?hl=fr
Les sitemaps permettent de faire connaître à Google les pages de votre site que nous ne découvririons peut-être pas autrement.
Cela signifie que vous n'avez pas besoin d'un sitemap si vous ne voulez pas que Google découvre quoi que ce soit. Avoir un plan du site ne fera rien, donc je ne le ferais pas du tout.
Contrairement au fichier robots.txt, le plan Sitemap n’a pas de nom/emplacement fixe.
Vous pouvez le nommer "s" au lieu de "sitemap.xml". Et il n’est pas nécessaire de le placer dans la racine de l’hôte. Voir http://www.sitemaps.org/protocol.html#location .
Il est donc probable que les moteurs de recherche n’essaient pas de deviner s’il existe un sitemap (ou, s’ils le tentent, ils ne peuvent pas s’attendre à trouver quelque chose). Il y a différentes façons d'informer les moteurs de recherche de l'emplacement de votre sitemap .