Vous êtes ici : Accueil Support Documentation How-tos Comment empêcher l'indexation d'un site par les moteurs de recherche
Actions sur le document

Comment empêcher l'indexation d'un site par les moteurs de recherche

Il peut être utile d'empêcher l'indexation d'un site par les moteurs de recherche. Par exemple pour un site de test ou lorsqu'on alimente un nouveau site qui n'est pas encore en production.

Lorsque les moteurs de recherche accèdent à un site internet, ils vérifient tout d'abord à la racine du site la présence d'un fichier nommé robots.txt.
Ce fichier permet de donner des directives (des restrictions) aux moteurs de recherche concernant l'indexation du site.
Si ce fichier est inexistant, aucune restriction n'est prise en compte.

Pour empêcher l'indexation du site, il suffit de rajouter à travers la zmi (à la racine du site ) un objet texte intitulé robots.txt.

Sélectionnez pour cela, dans la liste déroulante située dans la partie supérieure droite, la valeur "DTML Document" et cliquez sur le bouton Add.
Dans le formulaire proposé, indiquez comme "Id" la valeur "robots.txt" et cliquez sur le bouton "Add an Edit".
Un nouveau formulaire apparait.
Remplacez le contenu proposé par défaut par les 2 lignes suivantes :
User-Agent: *
Disallow: /
Attention de ne pas rajouter de ligne vide !
Ce fichier précise à tous les moteurs de recherche (User-Agent: *) de ne pas indexer le contenu (Disallow: /).

Vous pouvez trouver une explication plus complète concernant le fichier robots.txt sur le site www.commentcamarche.net

 Google ne tient apparemment pas compte du fichier robots.txt.

Il est possible de demander la désindexation de son site via les outils webmaster de Google.

Actions sur le document