Les pages indexées par les moteurs de recherche assurent un trafic stable vers la ressource. Mais si pour le moment votre site est en cours de développement, l'apparition de robots de recherche sur les pages de la ressource est hautement indésirable, car les informations sur les sections non remplies qui sont entrées dans la recherche peuvent priver votre ressource de visiteurs cibles pendant longtemps. Pour protéger temporairement le site de l'exploration par des robots, vous devez interdire son indexation. Pour ce faire, il suffit d'apporter quelques modifications simples dans le code de la ressource.
Il est nécessaire
- - avoir au moins des connaissances de base en HTML
- - savoir ouvrir le dossier racine du répertoire de fichiers de votre site
Instructions
Étape 1
Tout d'abord, vérifiez si votre site dispose d'un fichier robots.txt qui est responsable de l'indexation correcte de la ressource. Pour ce faire, allez sur http:: ⁄ www site ru ⁄ robots.txt ⁄, en remplaçant http: ⁄ ⁄ www site ru par l'adresse de votre site Web.
Étape 2
Si, lorsque vous cliquez sur ce lien, un enregistrement de la forme "User-agent: * Disallow…" s'ouvre, alors cela signifie que le fichier requis est présent sur votre site. Dans ce cas, allez dans le dossier racine où sont stockés tous les fichiers de votre site et recherchez le fichier robots.txt.
Étape 3
Si le système de gestion de votre site vous permet de modifier ce fichier directement à partir du dossier racine, ouvrez robots.txt via un service auxiliaire. S'il est impossible d'apporter des modifications au fichier via l'interface système, enregistrez le document sur votre ordinateur, puis ouvrez-le via le programme Bloc-notes.
Étape 4
Remplacez les deux premières lignes du document par les suivantes:
Agent utilisateur: *
Interdire: /.
L'inscription « User-agent: * » indique que les règles suivantes s'appliquent à tous les robots de recherche, et « Disallow: / » signifie que l'ensemble du site n'est pas indexé. Après avoir corrigé le contenu, enregistrez le fichier.
Étape 5
Si votre site n'a pas de fichier robots.txt, créez un nouveau document dans le Bloc-notes. Entrez les deux mêmes entrées, en plaçant chacune d'elles sur une nouvelle ligne, et enregistrez le fichier à l'aide de la commande "Fichier-Enregistrer sous …" sous le nom robots.txt.
Étape 6
Téléchargez le document créé dans le dossier racine de votre site et vérifiez son fonctionnement en suivant à nouveau le lien http: ⁄ ⁄ www · site · ru ⁄ robots.txt ⁄, où au lieu de "http: ⁄ ⁄ www · site · ru" entrez l'adresse de votre ressource.
Étape 7
Une autre façon d'interdire l'indexation consiste à insérer des balises META spéciales dans le code HTML des pages du site. Pour utiliser cette méthode, trouvez dans le code d'une des pages du site les inscriptions " et placez-les immédiatement après la " ligne ".
Étape 8
Si votre site est écrit en HTML, alors ce code doit être inséré sur chaque page. Pour une ressource PHP, il suffit de placer une telle entrée dans le fichier header.php.
