Le fichier robots.txt, situé à la racine d'un site web, sert à indiquer au moteur de recherche les zones du site qu'il ne doit pas explorer et analyser. Quelle est sa syntaxe ? Quelles sont les différentes directives possibles que l'on peut y insérer ? Quelle différences entre crawl et indexation ? Réponses en images...
La ...