Comment empêcher les robots des moteurs de recherche d’accéder à votre site ?
Pour empêcher tous les robots d’accéder à votre site, créez un fichier robots.txt avec le contenu suivant:
Agent utilisateur: *
Interdire: / Pour empêcher tous les robots d’accéder à un dossier spécifique, appliquez le code comme suit:
Agent utilisateur: *
Interdire: /dossier/ Remplacez dossier par le nom réel de votre dossier.