Presque chaque webmaster essaie d'optimiser les pages de son site de manière à obtenir un maximum d'éléments indexés. Mais dans certains cas, au contraire, vous devez masquer certaines pages, par exemple un formulaire pour saisir les données d'enregistrement, récupérer les mots de passe, etc.
Il est nécessaire
Modification du fichier Robots.txt
Instructions
Étape 1
Le moyen le plus simple de fermer l'indexation de plusieurs sections ou d'un site entier spécifique est de faire les entrées appropriées dans le fichier robots.txt. Il sert de guide aux moteurs de recherche. En entrant dans les pages du site, le robot de recherche se réfère à ce fichier, s'il n'y est pas, il indexe l'ensemble du site, sinon il suit les recommandations précisées dans ce fichier.
Étape 2
Si vous avez créé votre site vous-même, et que vous ne disposez pas d'une telle application, sous la forme d'un document texte indiquant les interdictions, il est aisé de le créer vous-même. Ouvrez un nouveau document texte, par exemple, à l'aide du programme Bloc-notes. Placez les lignes suivantes dans le corps du document: User-agent: * Disallow: /file.htmlDisallow: /directory/
Étape 3
Voyons maintenant ce que vous avez demandé au moteur de recherche comme tâche. Le signe "*" en face de l'agent utilisateur signifie que cette instruction doit être exécutée par absolument tous les systèmes de fichiers. Par exemple, si vous écrivez « Yandex » au lieu de « * », cet appel ne sera lu que par le robot du moteur de recherche Yandex. Les instructions Disallow interdisent l'indexation d'une section (répertoire) ou d'un fichier (fichier.html) spécifique.
Étape 4
Après avoir compilé le fichier robots.txt, vous pouvez accéder directement aux textes sur les pages du site. Comme vous le savez, les moteurs de recherche n'aiment pas avoir plus de 3 liens externes actifs sur vos pages. Que faire si vous avez besoin d'un saignement de nez mais que vous publiez 5 liens ou plus. Dans ces cas, vous pouvez utiliser un attribut ou une balise.
Étape 5
Pour fermer les liens de l'indexation par le moteur de recherche Google, vous devez mettre le lien sous la forme suivante: liens d'ancrage. Le corps de l'attribut doit être inséré dans n'importe quelle partie du lien, sans oublier de le séparer par un espace, c'est-à-dire l'attribut peut être placé entre "a" et "href" ou entre le lien et son ancre.
Étape 6
Pour fermer les liens de l'indexation par le moteur de recherche Yandex, vous devez mettre le lien sous la forme suivante: lien d'ancrage. La balise est placée au début et à la fin du lien. N'oubliez pas que cette balise est appariée: la deuxième partie, contrairement à la première, est accompagnée d'un signe "/".