X-Robots-Tag
Aussi appelé : en-tête HTTP robots
Un en-tête HTTP envoyé par le serveur, qui donne aux moteurs les mêmes consignes que la balise meta robots : noindex ou nofollow, entre autres.
Il sert pour les fichiers qui n'ont pas de code HTML où placer une balise, comme les PDF et les images, mais il s'applique aussi aux pages web.
Il n'apparaît pas dans le code de la page : il faut regarder les en-têtes de la réponse du serveur. Une page peut donc être en noindex sans que rien ne le montre à l'écran ni dans son code source.
Voir aussi
Une page peut-elle être indexée ?
Code HTTP, robots.txt, noindex, adresse canonique : le contrôle en quelques secondes, sans compte.