sammy-d Posted December 4, 2012 Share Posted December 4, 2012 Bonjour, j'ai repertorié mon site dans google webmaster juste hier,aprés avoir généré le fichier robot puis le sitemap j'ai fait le test sitemap dans l'outil google,c'est la qu'il m'affiche 84 erreurs / avertissements. Le probleme étant : URL bloquée par le fichier robots.txt. et la description : Le sitemap contient des URL qui sont bloquées par le fichier robots.txt. C'est ma premiere experience SEO Je suis un peu perdu !. Une clarification serait la bienvenue , merci d'avance. Link to comment Share on other sites More sharing options...
labelandco Posted December 4, 2012 Share Posted December 4, 2012 (edited) Il vous faut revoir le contenu de votre fichier robots.txt il doit certainement avoir un "Disallow" qui bloque peut etre pourriez vous nous transmettre votre fichier robots ? Edited December 4, 2012 by labelandco (see edit history) Link to comment Share on other sites More sharing options...
sammy-d Posted December 4, 2012 Author Share Posted December 4, 2012 Il vous faut revoir le contenu de votre fichier robots.txt il doit certainement avoir un "Disallow" qui bloque peut etre pourriez vous nous transmettre votre fichier robots ? Merci,voici le fichier : # robots.txt automaticaly generated by PrestaShop e-commerce open-source solution # http://www.prestashop.com - http://www.prestashop.com/forums # This file is to prevent the crawling and indexing of certain parts # of your site by web crawlers and spiders run by sites like Yahoo! # and Google. By telling these "robots" where not to go on your site, # you save bandwidth and server resources. # For more information about the robots.txt standard, see: # http://www.robotstxt.org/wc/robots.html User-agent: * # Private pages Disallow: /*orderby= Disallow: /*orderway= Disallow: /*tag= Disallow: /*id_currency= Disallow: /*search_query= Disallow: /*back= Disallow: /*utm_source= Disallow: /*utm_medium= Disallow: /*utm_campaign= Disallow: /*n= Disallow: /*controller=addresses Disallow: /*controller=address Disallow: /*controller=authentication Disallow: /*controller=cart Disallow: /*controller=discount Disallow: /*controller=footer Disallow: /*controller=get-file Disallow: /*controller=header Disallow: /*controller=history Disallow: /*controller=identity Disallow: /*controller=images.inc Disallow: /*controller=init Disallow: /*controller=my-account Disallow: /*controller=order Disallow: /*controller=order-opc Disallow: /*controller=order-slip Disallow: /*controller=order-detail Disallow: /*controller=order-follow Disallow: /*controller=order-return Disallow: /*controller=order-confirmation Disallow: /*controller=pagination Disallow: /*controller=password Disallow: /*controller=pdf-invoice Disallow: /*controller=pdf-order-return Disallow: /*controller=pdf-order-slip Disallow: /*controller=product-sort Disallow: /*controller=search Disallow: /*controller=statistics Disallow: /*controller=attachment Disallow: /*controller=guest-tracking # Directories Disallow: /*classes/ Disallow: /*config/ Disallow: /*download/ Disallow: /*mails/ Disallow: /*modules/ Disallow: /*translations/ Disallow: /*tools/ # Files Disallow: /*fr/adresse Disallow: /*fr/adresses Disallow: /*fr/authentification Disallow: /*fr/panier Disallow: /*fr/bons-de-reduction Disallow: /*fr/historique-des-commandes Disallow: /*fr/identite Disallow: /*fr/mon-compte Disallow: /*fr/commande Disallow: /*fr/details-de-la-commande Disallow: /*fr/commande-rapide Disallow: /*fr/avoirs Disallow: /*fr/mot-de-passe-oublie Disallow: /*fr/recherche # Sitemap Sitemap: http://www.opaline-bijoux.fr/sitemap.xml Link to comment Share on other sites More sharing options...
labelandco Posted December 4, 2012 Share Posted December 4, 2012 Il y a un disallow sur les "controller" alors que votre sitemap présente le code suivant : http://www.opaline-bijoux.fr/index.php?id_product=2&controller=product faites un test en enlevant sur votre robots tous les "Disallow: /*controller...." Link to comment Share on other sites More sharing options...
sammy-d Posted December 4, 2012 Author Share Posted December 4, 2012 (edited) Il y a un disallow sur les "controller" alors que votre sitemap présente le code suivant : http://www.opaline-bijoux.fr/index.php?id_product=2&controller=product faites un test en enlevant sur votre robots tous les "Disallow: /*controller...." En effet ça va beaucoup mieux,plus que 1 probleme : URL bloquée par le fichier robot.txt description : le sitemap contient des url qui sont bloquées par le fichier robot.txt exemple : Valeur http://www.opaline-b...=authentication Auriez vous une idée ? Merci beaucoup pour le coup de main. Edited December 4, 2012 by sammy-d (see edit history) Link to comment Share on other sites More sharing options...
-stephane Posted December 6, 2012 Share Posted December 6, 2012 (edited) Le problème n'est pas que le fichier robots bloque des urls du sitemap, mais que les urls du sitemap ne correspondent pas aux urls du site. (Url rewritées sur le site, mais pas dans le sitemap) http://www.opaline-bijoux.fr/index.php?id_product=2&controller=product http://www.opaline-bijoux.fr/index.php?controller=authentication Ce ne sont pas des urls présentes sur le site. Edited December 6, 2012 by -stephane (see edit history) Link to comment Share on other sites More sharing options...
sammy-d Posted December 6, 2012 Author Share Posted December 6, 2012 Le problème n'est pas que le fichier robots bloque des urls du sitemap, mais que les urls du sitemap ne correspondent pas aux urls du site. (Url rewritées sur le site, mais pas dans le sitemap) http://www.opaline-b...troller=product http://www.opaline-b...=authentication Ce ne sont pas des urls présentes sur le site. Merci pour la réponse, donc il faudrait modifier mon site map avec les url réecrites si j'ai bien compris ? Link to comment Share on other sites More sharing options...
-stephane Posted December 6, 2012 Share Posted December 6, 2012 Avez vous essayé de regénérer le sitemap? Vous l'aviez peut être généré avant la mise en place de l'url rewriting. Link to comment Share on other sites More sharing options...
sammy-d Posted December 6, 2012 Author Share Posted December 6, 2012 Avez vous essayé de regénérer le sitemap? Vous l'aviez peut être généré avant la mise en place de l'url rewriting. Je viens justement de regénérer le ht.access puis le sitemap mais le test sitemap google affiche toujours un avertissement. Link to comment Share on other sites More sharing options...
Recommended Posts