Terme technique Retour

Disallow

Crawl

Directive robots.txt qui demande aux robots de ne pas explorer certaines URLs ou sections.

Disallow
Bien gérer Disallow évite les signaux contradictoires, améliore la compréhension du contenu et réduit le risque de perdre du crawl, de la visibilité ou de la confiance.
  • Testez Disallow avec un crawler ou une requête HTTP directe.
  • Comparez le résultat avec les URLs canoniques et le sitemap.
  • Corrigez les blocages, erreurs ou signaux contradictoires avant de relancer l’audit.