Accueil => Conseils référencement => "robots.txt"
FICHIER "robots.txt"
Par défaut, les robots des moteurs scanne toute l'arborescence de votre site mais si vous avez des fichiers ou répertoires que vous ne souhaitez pas retrouver répertoriés sur les moteurs de recherche, il est utile d'installer à la racine de votre site un fichier "robots.txt" contenant toutes les directives. Je pense par ex. à des fichiers tels que des pages d'administration, des fichiers Excel avec vos membres. Tapez dans Google : inurl:email.xls vous comprendrez ce que je veux dire !
Pour éviter que les robots des moteurs n'indexent certaines partie de votre site :
|