Votre article est en ligne, mais vous ne le retrouvez pas dans Google. Avant de changer ses mots-clés, vérifiez trois mécanismes : la découverte de l’adresse, l’autorisation d’exploration et les règles d’indexation. Ils répondent à des questions différentes.
Une page accessible dans votre navigateur n’est pas nécessairement indexée. Voici une méthode pour comprendre les réglages et rechercher une cause concrète, sans promettre une place dans les résultats.
Trois outils, trois fonctions
| Outil | Fonction principale | Ce qu’il ne garantit pas |
|---|---|---|
| Sitemap | Signaler des URL à découvrir | Leur exploration ou leur indexation |
| Robots.txt | Donner des règles d’exploration aux robots | La confidentialité d’une page |
| Noindex | Demander qu’une page reste hors des résultats | Empêcher son accès direct |
Ces distinctions sont décrites dans les guides de Google sur les sitemaps, le robots.txt et noindex.
Un sitemap aide Google à connaître les adresses. Une interdiction dans robots.txt peut l’empêcher de lire leur contenu. Une directive noindex doit pouvoir être lue pour que Google la prenne en compte.
Contrôler le fichier robots.txt à la racine
Pour un site public simple, un fichier peut contenir cette structure :
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap-index.xmlIl s’agit d’un exemple, pas d’un fichier à recopier sans adaptation. Remplacez le domaine et le chemin par votre sitemap réel. Ouvrez ensuite https://votre-domaine/robots.txt et confirmez que vous voyez du texte, pas votre page d’accueil ou une erreur.
Un bloc contenant Disallow: / pour tous les robots mérite votre attention : il est parfois conservé après une phase de développement. Ne retirez toutefois pas des règles dont vous ignorez la raison ; elles peuvent limiter l’exploration de pages de recherche ou d’espaces techniques.
Les documents confidentiels doivent être protégés par une authentification. Un chemin publié dans robots.txt peut être lu par n’importe quel visiteur.
Vérifier les URL du sitemap
Ouvrez le sitemap et prenez trois adresses au hasard : un article récent, une rubrique et une page plus ancienne. Chacune doit mener à la page publique prévue, avec le bon domaine et le protocole HTTPS.
Évitez de signaler comme pages à indexer des brouillons, des erreurs ou des URL qui redirigent systématiquement vers une autre adresse. Si vous utilisez un générateur de site, vérifiez le sitemap après la compilation et après l’envoi sur l’hébergement.
Un sitemap index est simplement un fichier qui référence d’autres sitemaps. Dans ce cas, ouvrez aussi les fichiers enfants pour contrôler les URL des articles. Signaler uniquement l’index ne dispense pas de vérifier son contenu.
Rechercher une directive noindex
Dans le code source HTML d’une page, une instruction de ce type demande son exclusion :
<meta name="robots" content="noindex">La même règle peut être envoyée dans un en-tête HTTP X-Robots-Tag. Elle peut donc provenir du serveur, pas seulement du fichier HTML ou d’une extension SEO.
N’ajoutez pas noindex dans robots.txt : Google ne prend pas en charge cette utilisation. Si vous voulez exclure une page avec noindex, laissez Google l’explorer pour lire la directive. Combiner blocage de l’exploration et noindex peut empêcher la règle d’être vue.
Utiliser l’inspection d’URL pour un cas précis
Dans une propriété Search Console que vous avez validée, inspectez l’adresse complète de l’article. L’outil d’inspection d’URL aide à distinguer l’état connu par Google des résultats d’un test de la page en direct.
Notez le message exact et l’adresse analysée. Une variante avec www, un ancien chemin ou une barre finale différente peut vous faire examiner une autre URL que celle utilisée par le site.
Après une correction, demandez une nouvelle exploration si l’outil le permet. Gardez la date et le changement effectué pour comparer l’état lors de votre prochaine vérification ; multiplier les demandes n’offre pas de délai garanti.
Une vérification dans le bon ordre
- La page ouvre-t-elle le bon contenu à son adresse publique ?
- Un lien depuis une rubrique ou un autre article permet-il de la découvrir ?
- Le sitemap contient-il cette adresse ?
- Robots.txt autorise-t-il son exploration ?
- Une directive noindex est-elle présente dans le HTML ou les en-têtes ?
- Que rapporte Search Console pour cette URL exacte ?
Si tous les réglages sont cohérents, poursuivez le travail éditorial : une page utile, des liens pertinents et un contenu distinct ont davantage de sens qu’une modification quotidienne du robots.txt. Pour la partie hébergement, consultez notre guide de mise en ligne d’un site Astro.