web-dev-qa-db-fra.com

Aide sur les méta-tags et X-Robots-Tag des robots

J'ai deux questions sur les méta-tags et X-Robots-Tag des robots:

  • Si une page comporte à la fois la balise méta X-Robots-Tag HTTP et la balise méta robots, cela peut-il poser problème?

    Par exemple:
    Sur les en-têtes de réponse HTTP: X-Robots-Tag: noindex
    Et sur le code source de la page: <meta content='noindex' name='robots'/>

    Quel est le meilleur? X-Robots-Tag En-tête HTTP ou robots balise méta?

  • Sur une page de redirection/masque masquée, les balises de robots internes sont-elles comptabilisées?

    Par exemple:
    example1.com/masked-url redirection de trame vers example2.com/original-url

    Est-ce qu'il compte les balises META de example1.com/masked-url ou example2.com/original-url?

web-crawlersrobots.txtmeta-robots
2
Dorel

Si une page comporte à la fois la balise méta X-Robots-Tag HTTP et la balise méta robots, cela peut-il poser problème?

Cela ne devrait pas causer de "problèmes". En vous assurant de fournir les mêmes valeurs pour les deux. par exemple. noindex, comme dans votre exemple.

Pour les moteurs de recherche prenant en charge l'en-tête de réponse HTTP X-Robots-Tag, il doit toujours être prioritaire. Lorsqu'il existe un en-tête de réponse HTTP équivalent pour un méta-élément de la page, l'en-tête HTTP l'emporte toujours.

Quel est le meilleur? X-Robots-Tag En-tête HTTP ou robots balise méta?

Eh bien, vous ne pouvez pas utiliser la balise méta robots sur des ressources non HTML, telles que des fichiers PDF, des images, etc. C'est pourquoi l'en-tête X-Robots-Tag était inventé.

Mais si tous les moteurs de recherche principaux prennent en charge l’en-tête X-Robots-Tag, il n’a probablement pas un support aussi étendu que la balise méta robots, qui est plus ancienne.

Sur une page de redirection/masque masquée, les balises de robots internes sont-elles comptabilisées?

Oui. Le document contenu dans le cadre est une requête entièrement séparée et, par conséquent, il est récupéré comme toute autre requête.

Est-ce qu'il compte les balises META de example1.com/masked-url ou example2.com/original-url?

Tous les deux. Ce sont deux demandes distinctes.

0
MrWhite