Suggérez des URL ou des chemins que les moteurs de recherche Internet ne doivent pas analyser à l'aide du protocole Exclusion ...

Suggérez des URL ou des chemins que les moteurs de recherche Internet ne doivent pas analyser à l'aide du protocole Exclusion des robots. Les moteurs de recherche utilisent également ces instructions pour rechercher le plan d'un site web. L'emplacement du plan de site est ajouté automatiquement au bas du fichier robots.txt.