Retour au blog SEO Technique - 7 min

noindex : éviter de bloquer la production après un staging

Un noindex de préproduction arrive en production via une option, un en-tête ou une balise. Contrôlez le HTML et les en-têtes après chaque déploiement.

La préproduction doit porter un noindex. La production ne doit pas. L’incident classique est de promouvoir l’un vers l’autre sans retirer la consigne : Google cesse d’indexer des URL qui répondent pourtant 200. Le correctif est mécanique. Il consiste à savoir où la consigne est écrite, à la vérifier après déploiement, et à ne pas la confondre avec robots.txt.

Où le noindex est écrit

Deux canaux disent à un moteur de ne pas indexer l’URL qu’il vient de lire.

  • La balise dans le HTML : <meta name="robots" content="noindex">. Parfois noindex, nofollow. C’est le modèle, une extension, ou un champ SEO.
  • L’en-tête HTTP : X-Robots-Tag: noindex. Il est posé par le serveur, le CDN ou un fichier de configuration, y compris sur des PDF qui n’ont pas de <head>.

Sur WordPress, l’option de lecture « Demander aux moteurs de recherche de ne pas indexer ce site » écrit cette balise sur les pages. Elle est juste sur un staging. Elle est fausse en production. Comme elle voyage avec la base lors d’un import, un rafraîchissement de préproduction vers la prod, ou l’inverse mal ciblé, la recopie.

Un mot de passe HTTP sur le staging limite qui peut télécharger les pages. Le noindex limite l’indexation de ce qui a déjà été téléchargé. Les deux se cumulent. Le mot de passe seul n’envoie pas de consigne d’indexation le jour où on le retire pour une recette ouverte.

Comment la consigne passe en production

Passez en revue le chemin de déploiement, pas seulement le thème.

  1. Base copiée depuis le staging, option d’indexation incluse.
  2. En-tête ajouté « pour tout le virtual host » puis le virtual host de production hérite du snippet.
  3. Variable d’environnement ROBOTS ou équivalent laissée à noindex dans le fichier de prod.
  4. Balise en dur dans le pied de page, utile le temps d’une refonte, jamais retirée.
  5. CDN qui ajoute X-Robots-Tag sur un nom d’hôte, et la règle vise aussi le domaine public.

robots.txt n’est pas ce mécanisme. Une ligne Disallow: / bloque l’exploration. Elle n’est pas un noindex. Google a cessé d’honorer une directive noindex placée dans robots.txt. Si la production est en Disallow, le moteur ne peut pas voir que vous avez retiré la balise : il n’explore plus. Pour faire indexer, il faut autoriser l’exploration et ne plus envoyer noindex.

Après chaque mise en production, contrôlez les deux canaux sur l’accueil et sur une page intérieure. En ligne de commande, les en-têtes se lisent avec une requête HEAD. Dans le code source, cherchez noindex. Un test d’URL montre ce que répond l’URL publique, hors de votre navigateur déjà connecté au staging.

Retirer un noindex déjà pris en compte

Tant que la balise ou l’en-tête est servi, une demande d’indexation ne gagne pas. Retirez d’abord la consigne, vérifiez qu’une requête anonyme ne la reçoit plus, puis utilisez l’inspection d’URL dans Search Console sur les modèles de pages qui comptent. Inutile de soumettre tout le sitemap dix fois : si la consigne est partie, l’exploration suivante peut indexer.

Les URL de staging déjà présentes dans l’index se traitent à part. Gardez leur noindex, ou répondez 410 si l’hôte ne doit plus exister. Ne redirigez pas le staging vers la production sans réfléchir : vous pouvez transmettre des signaux et des liens de recette. Mieux vaut un hôte inaccessible aux moteurs qu’une redirection permanente posée dans l’urgence.

Search Console classe ces URL dans un motif d’exclusion, distinct des URL découvertes mais pas encore explorées. Le détail des motifs est dans l’article sur les pages exclues. SiteGarde peut signaler qu’une URL de production change de code ou de contenu ; il ne lit pas à votre place la case WordPress. La vérification du noindex reste une étape de déploiement, la même à chaque fois.

Questions fréquentes

Comment empêcher l’indexation d’une préproduction ?

Envoyez une balise meta robots noindex ou un en-tête X-Robots-Tag: noindex, et protégez l’hôte par un mot de passe ou une restriction d’adresse. Le noindex seul n’empêche pas le téléchargement de la page.

Pourquoi la production se retrouve-t-elle en noindex ?

La base, le thème ou la configuration du serveur de préproduction a été repris tel quel : option « décourager les moteurs » activée, en-tête ajouté pour le staging, ou balise laissée dans le modèle.

Un Disallow dans robots.txt équivaut-il à noindex ?

Non. Disallow empêche l’exploration. Google peut garder l’URL connue sans en lire le contenu, et il ne verra pas une balise noindex qu’il n’a pas le droit d’aller chercher.

Surveiller mes URL