Exclure les pages web des moteurs de recherche à l'aide de balises meta robots

Vous pouvez utiliser balises meta robots pour empêcher une araignée de moteur de recherche de ramper pages spécifiques de votre site Web. Vous pouvez inclure une balise spéciale dans le code HTML de la page pour dire robots de ne pas indexer la page, ou de ne pas suivre les liens sur cette page. Vous souhaitez placer cette balise après l'autre Meta tags, qui font partie du code HTML situé dans la section de la tête d'une page Web.

Utilisation de balises meta robots est moins efficace que d'utiliser un fichier texte robots large place pour deux raisons. Tout d'abord, robots ignorent parfois robots balises Meta, et la seconde, ces balises ralentissent les robots lecture de vos pages, ce qui peut réduire le nombre de pages qu'ils sont prêts à ramper. En outre, cette méthode peut donner vos maux de tête pour les webmasters car les balises doivent être maintenus sur les pages individuelles, plutôt que dans un fichier central.

La balise Meta robots ci-dessous indique le robot du moteur de recherche de ne pas indexer la page et de ne pas suivre l'un des liens sur la page:

Vous pouvez utiliser cette balise pour dire au robot de lire et d'indexer le contenu de la page, mais de ne pas suivre l'un des liens:

La balise suivante charge le robot à ignorer le contenu de la page, mais suivez les liens:


» » » » Exclure les pages web des moteurs de recherche à l'aide de balises meta robots