La tâche consistant à supprimer des pages individuelles ou l'ensemble du site des moteurs de recherche est rencontrée par un webmaster lorsqu'il modifie des informations, modifie un domaine, combine plusieurs ressources et un certain nombre d'autres raisons. Il existe plusieurs façons de résoudre le problème, en fonction du résultat souhaité.
Instructions
Étape 1
Supprimez la page à désindexer afin que le serveur renvoie un message d'erreur lorsqu'il essaie de naviguer vers la page Web sélectionnée HTTP / 1.1 404 Not Found. Pour appliquer les modifications sélectionnées, vous devez attendre que le robot accède à nouveau à la page requise.
Étape 2
Utilisez le fichier racine du robot robots.txt pour exclure des sections ou des pages sélectionnées de l'indexation des moteurs de recherche. Pour empêcher l'affichage du panneau d'administration dans le moteur de recherche, utilisez la commande: User-Agent: * Diaallow: /admin / Ou, pour exclure la page sélectionnée de l'indexation, saisissez la valeur: User-Agent: * Disallow: / selected_page.html # Pour appliquer les modifications, le robot doit visiter à nouveau la page sélectionnée.
Étape 3
Utilisez la méthode des métabalises pour ajouter une règle spécifiée en code HTML à toutes les pages requises: Ceci est nécessaire afin d'exclure les pages indésirables du moteur de recherche.
Étape 4
Sélectionnez une méthode de création de X-Robots-Tag pour introduire des commandes dans l'en-tête http qui ne sont pas affichées dans le code de la page: X-Robots-Tag: noindex, nofollow Cette méthode est très utile pour exclure des pages ou des sections sélectionnées de l'indexation de moteurs de recherche étrangers.
Étape 5
Utilisez une page de contrôle spéciale pour les webmasters dans Yandex: https://webmaster.yandex.ru/deluri.xml ou dans Google: https://www.google.com/webmasters/tools. Ceci est fait pour interdire l'affichage du page, section ou site entier dans le moteur de recherche sélectionné.