jp77 Posted February 3, 2014 Share Posted February 3, 2014 (edited) Bonsoir a tous Une question me turlupine avec google, qui sait pourquoi Google avec la commande site :www.comatic.fr m'affiche environ 74 resultats a la dixième pages et le reste avec le texte bien connu : La description de ce résultat n'est pas accessible à cause du fichier robots.txt de ce site Alors que le fichier robots.txt ne comporte rien de special. Merci d'avance Le site est celui ci http://www.comatic.fr en mode catalogue Edited February 4, 2014 by jp77 (see edit history) Link to comment Share on other sites More sharing options...
Djolhan Posted February 4, 2014 Share Posted February 4, 2014 Le robots.txt comporte des url crawlable par google, notamment tout ce qui est tri dans les catégories (orderby=) et bien d'autres encore. Cela aide à éviter d'avoir trop de duplicate crawlé par les robots, c'était d'ailleurs l'un des gros points faible de prestashop avant la 1.5. Link to comment Share on other sites More sharing options...
jp77 Posted February 4, 2014 Author Share Posted February 4, 2014 Bonjour Djolhan Je te remercie de ta réponse, voila qui est plus clair a ce sujet. bonne journée Link to comment Share on other sites More sharing options...
Recommended Posts