devriez-vous laisser la page de résultats de recherche être indexée
J'ai une page d'un catalogue, qui contient une liste de mots-clés de tous les produits à l'intérieur de ces catalogues, et je veux créer un lien entre ces mots-clés et une page de recherche.
Par exemple, si la page contient un mot clé de television 24", electronic, sound system, si l'utilisateur clique sur chacun des mots clés, une page /search/television 24" sera ouverte, par exemple.
Devrais-je laisser ces pages indexées ou dois-je le bloquer avec robots.txt?
Selon règles Google pour les webmasters :
Utilisez le fichier robots.txt pour empêcher l’exploration des pages de résultats de recherche ou d’autres pages générées automatiquement qui n’ajoutent pas beaucoup de valeur aux utilisateurs provenant de moteurs de recherche.
Plus souvent qu'autrement, ces pages peuvent apparaître comme "spam" et de faible valeur.