Ai-je besoin de robots.txt?
Je veux permettre à tous les robots de tout explorer. Dois-je créer un fichier robots.txt?
Si le fichier manque, aura-t-il une influence négative sur certains robots d'exploration?
Si je dois créer, quoi devrait-il ressembler?
Vous n'en avez pas besoin, car ne pas en avoir est interprété comme signifiant que tout votre contenu doit être exploré. Mais je vous recommande d’utiliser une vierge pour éviter l’accumulation d’erreurs 404 inutiles dans vos statistiques.