|
Si au contraire de tout le monde ou presque vous voulez refouler les robots des moteurs de recherche, voici le truc, simple.
ça peut arriver si par exemple votre site n'est pas encore fini, ou si vous tenez à ce que votre site wiki passe en ADMIN par un simple lien et empêcher les robots de vous supprimer des pages sans prévenir.
Si le site est en nom de domaine propre genre montruc.org, ajouter dans le répertoire racine un fichier texte nommé robots.txt et contenant juste ceci :
Là le robot il fait demi-tour : Allez au pied !
Ca s'appliquera à tout le nom de domaine, toutes les pages qui y sont reliées.
Si c'est chez un hébergeur gratuit, il faut modifier chaque page HTML à interdire.
Ajouter dans l'en-tête avec les autres META, c'est à dire avant </HEAD>, la ligne suivante :
Et les robots seront bien gardés :o)
Pense à enlever le fichier ou remodifier les pages le jour où les robots seront à nouveau tes amis.
|