interdire l'indexation d'une page par les moteurs

Suite à une demande que j’ai eu aujourd’hui, voici l’explication pour interdire au moteur ou plutôt à leurs spiders de référencer une page ou les liens depuis cette page.

Il faut utiliser un meta-tag dans l’en-tête de la page, la balise meta name= »robots ».

Voici les possibilité d’écriture de cette balise :

• La page n’est pas indexée par le robot mais les liens contenus dans la page sont indexés.
  <meta name= »robots » content= »noindex, follow »>

• La page est indexée par le robot mais les liens contenus dans la page ne sont pas indexés.
  <meta name= »robots » content= »index, nofollow »>

• Ni la page, ni les liens ne sont indexés par le robot.
  <meta name= »robots » content= »noindex, nofollow »> » ou « <meta name= »robots » content= »none »>

• Ces deux dernières syntaxe ne servent à rien car c’est ce qui se déroule sans balise, le spiders indexe la page et suit les liens.
  <meta name= »robots » content= »index, follow »> ou <meta name= »robots » content= »all »> »