Dois-je ajouter le plan Sitemap / robots.txt de sous-domaine séparément?
Dites que j'ai un domaine example.com
Et il a un sous-domaine sub.example.com
Et un autre sous-domaine internal.example.com
J'ai quelques liens sur example.com et sub.example.com pour que Google puisse l'explorer. Mais je ne veux pas que Google récupère quoi que ce soit sur internal.example.com
Que dois-je faire dans ce cas?
Voici un lien vers documentation de Google sur la validité des URL robots.txt en fonction de leur emplacement.
Avez-vous des liens du domaine principal ou de l'autre sous-domaine vers internal.domain.com?
Sinon, Google, en général, ne verrait pas votre sous-domaine seul. Je recommanderais quand même de le bloquer via le fichier robots.txt s’ils n’ont jamais été exposés auparavant. Si, par hasard, les URL de internal.example.com ont été exposées à Google, utilisez Robots-Meta Tag pour déclarer ces pages non indexables et non suivies.