// diagnostic GSC
URL bloquée par le fichier robots.txt.
Le statut le plus binaire de Search Console : une règle Disallow interdit à Googlebot d'explorer la page. Reste à savoir si ce blocage est un choix assumé ou un accident. Retrouver la règle en cause, décider, corriger.
Ce que signifie ce statut.
Dans le rapport d'indexation, "URL bloquée par le fichier robots.txt" signale que Googlebot a tenté d'accéder à la page mais qu'une directive Disallow du fichier robots.txt le lui interdit. Google respecte la consigne : la page n'est pas explorée, son contenu n'est jamais lu, et elle est rangée dans les pages non indexées.
Contrairement aux statuts de qualité comme "Explorée, actuellement non indexée", il n'y a ici aucune ambiguïté sur la cause : c'est une instruction que le site donne lui-même. La seule question qui compte est de savoir si cette instruction est volontaire.
// à retenir
Ce statut n'est pas une erreur en soi : bloquer certaines zones du site est une pratique saine. Il devient un problème uniquement quand une page qui doit ranker figure dans la liste.
Le piège : bloqué du crawl, pas de l'index.
Le robots.txt contrôle l'exploration, pas l'indexation. Cette distinction, détaillée dans le guide robots.txt et indexation, produit deux effets contre-intuitifs :
- Une URL bloquée peut être indexée quand même : si elle reçoit des liens, Google peut la lister dans les résultats sans en connaître le contenu, avec un extrait vide. Ce cas apparaît dans GSC sous un statut distinct : "Indexée malgré le blocage par le fichier robots.txt".
- Un noindex sur une page bloquée ne sert à rien : Google ne crawlant pas la page, il ne lit jamais la balise meta robots noindex. Pour désindexer proprement, autoriser le crawl d'abord, poser le noindex ensuite.
- Les signaux de la page sont gelés : balise canonical, redirections, contenu mis à jour, données structurées : rien n'est vu tant que le blocage tient. Une page déjà indexée puis bloquée garde sa version figée avant de décliner.
Retrouver la règle qui bloque.
Trois vérifications suffisent, dans l'ordre :
- 01
Inspecter l'URL dans Search Console
Coller l'URL dans la barre d'inspection. La section "Exploration" confirme le blocage ("Exploration autorisée ? Non"). Le rapport Paramètres > robots.txt montre la version exacte du fichier que Google a en cache et sa date de récupération : c'est cette version qui fait foi, pas celle du serveur.
- 02
Lire le fichier et isoler la règle
Ouvrir
votredomaine.fr/robots.txtet comparer l'URL bloquée aux lignes Disallow du groupeUser-agent: *(ou d'un groupe Googlebot spécifique, qui prend alors le dessus). Attention aux wildcards :Disallow: /*?bloque toutes les URLs à paramètres,Disallow: /bloque tout le site. - 03
Vérifier l'origine du fichier
Le robots.txt est parfois généré dynamiquement : plugin SEO WordPress, réglage "Découragez les moteurs de recherche" (voir le guide indexation WordPress), configuration du CDN, ou fichier d'un environnement de recette poussé en production. Corriger à la source, pas seulement le fichier.
Corriger selon le cas.
Blocage accidentel
La page doit ranker : retirer ou restreindre la règle Disallow (une règle Allow: plus spécifique peut ré-ouvrir un chemin précis sans toucher au reste). Google relit le fichier sous 24 heures. Demander ensuite une indexation via Inspection de l'URL, méthode détaillée dans forcer l'indexation Google.
Blocage volontaire
Filtres à facettes, tris, recherche interne, espaces privés : le blocage protège le crawl budget, aucune action requise. Vérifier seulement que ces URLs ne figurent pas dans le sitemap (signal contradictoire) et qu'aucune page stratégique ne matche la règle par effet de bord.
// validation
Après correction du fichier, utiliser "Valider la correction" sur la ligne du rapport. Compter 24 heures pour la relecture du robots.txt, puis quelques jours à quelques semaines pour le re-crawl complet des URLs débloquées.
Ce statut n'est qu'une des causes possibles de non-indexation. Vue d'ensemble des statuts et de leurs correctifs dans le guide page non indexée par Google.
Questions fréquentes.
Que signifie le statut "URL bloquée par le fichier robots.txt" ?
Googlebot a voulu explorer l'URL mais une règle Disallow du fichier robots.txt le lui interdit. La page ne peut donc pas être crawlée. Attention : le robots.txt bloque le crawl, pas l'indexation. Une URL bloquée peut malgré tout apparaître dans les résultats si elle reçoit des liens, mais sans description exploitable.
Comment trouver la règle robots.txt qui bloque ma page ?
Dans Search Console, ouvrir Inspection de l'URL : la section "Exploration" indique "Exploration autorisée ? Non : bloquée par le fichier robots.txt". Comparer ensuite l'URL aux règles Disallow du fichier accessible sur votredomaine.fr/robots.txt. Le rapport Paramètres > robots.txt de GSC montre aussi la version du fichier que Google utilise.
Une page bloquée par robots.txt peut-elle quand même être indexée ?
Oui, c'est le piège classique. Si l'URL reçoit des liens externes ou internes, Google peut l'indexer sans l'avoir crawlée : elle apparaît alors dans les résultats avec la mention "Aucune information n'est disponible pour cette page". Pour vraiment désindexer une page, il faut au contraire autoriser le crawl et poser une balise noindex.
Le blocage robots.txt fait-il perdre du référencement ?
Si le blocage est volontaire (paramètres d'URL, espace client, environnement de recette), non : c'est une bonne pratique de gestion du crawl budget. S'il est accidentel sur des pages stratégiques, oui : Google ne voit plus le contenu, ne peut plus le mettre à jour dans son index, et la page perd progressivement ses positions.
Combien de temps pour que Google prenne en compte un robots.txt corrigé ?
Google met en cache le robots.txt jusqu'à 24 heures. Après correction, le fichier est généralement relu sous un jour, mais le re-crawl des URLs débloquées peut prendre de quelques jours à plusieurs semaines selon l'autorité du site. Accélérer avec Inspection de l'URL > "Demander une indexation" sur les pages prioritaires.
Faut-il corriger toutes les URLs listées sous ce statut ?
Non. Ce statut n'est une erreur que si le blocage n'est pas voulu. Trier la liste exportée en deux groupes : les URLs qui doivent ranker (à débloquer) et les URLs utilitaires (filtres, tris, admin) où le blocage est justifié. Pour ces dernières, aucune action : le statut est informatif.
// passer à l'action
Tester le blocage en 30 secondes.
Le diagnostic gratuit vérifie le robots.txt, la balise meta robots et 15 autres points d'indexabilité sur n'importe quelle URL.