Augmentation très rapide des erreurs de navigation dans google webmaster depuis quelques jours.

[kimzey]

Bonjour,

Je rencontre depuis 4jours une augmentation exponentielle des erreurs de navigations dans google webmaster.
En effet :

- les "Accès restreint par un fichier robots.txt" sont passés de 8 à 196 !

http://www.agelyance.com/authentication.php?back=history.php
http://www.agelyance.com/authentication.php?back=my-account.php
http://www.agelyance.com/cart.php?add&id_product=100&token=6155346360255e5dfc05397aeda1515a
http://www.agelyance.com/cart.php?add&id_product=101&token=6155346360255e5dfc05397aeda1515a
http://www.agelyance.com/cart.php?add&id_product=102&token=6155346360255e5dfc05397aeda1515a
http://www.agelyance.com/cart.php?add&id_product=103&token=6155346360255e5dfc05397aeda1515a
.....

- les "Inaccessibles" sont passés d'une petite trentaine à 222 !

http://www.agelyance.com/14_holtex?n=10&%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&orderby=position&orderway=desc&id_manufacturer=14
http://www.agelyance.com/14_holtex?n=10&%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&orderby=position&orderway=desc&p=2&id_manufacturer=14
http://www.agelyance.com/14_holtex?n=10&%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&%25253Bamp%25253Bamp%25253Bamp%25253Bp=2&orderby=name&orderway=asc&id_manufacturer=14
......

Je pense à un problème de fichier robot et je suis tombé sur ce sujet : http://www.prestashop.com/forums/viewthread/36834/rapports_de_bugs/resolu_bug_generateur_de_fichiers_robots_dot_txt.

J'ai alors corrigé hier soir le bug expliqué et ce matin les erreurs avaient encore augmenté.

Dans le doute je vous donne mon fichiers robots :

User-agent: *
# Directories
Disallow: /classes/
Disallow: /config/
Disallow: /download/
Disallow: /mails/
Disallow: /modules/
Disallow: /translations/
Disallow: /tools/
# Files
Disallow: /addresses.php
Disallow: /address.php
Disallow: /authentication.php
Disallow: /cart.php
Disallow: /contact-form.php
Disallow: /discount.php
Disallow: /footer.php
Disallow: /get-file.php
Disallow: /header.php
Disallow: /history.php
Disallow: /identity.php
Disallow: /images.inc.php
Disallow: /init.php
Disallow: /my-account.php
Disallow: /order.php
Disallow: /order-slip.php
Disallow: /order-detail.php
Disallow: /order-follow.php
Disallow: /order-return.php
Disallow: /order-confirmation.php
Disallow: /pagination.php
Disallow: /password.php
Disallow: /pdf-invoice.php
Disallow: /pdf-order-return.php
Disallow: /pdf-order-slip.php
Disallow: /product-sort.php
Disallow: /search.php
Disallow: /statistics.php
Disallow: /zoom.php
Disallow: /modules/sendtoafriend/sendtoafriend-form.php
Disallow: /modules/askinfoproduct/askinfoproduct.php

Sitemap: http://www.agelyance.com/sitemap.xml

Une idée pour résoudre ce problème ?

Merci !

[tattoopiercing]

Bonsoir,

je sais pas si ca peut aider mais voici mon fichiers robots

User-agent: *

# Directories
Disallow: /classes/
Disallow: /config/
Disallow: /download/
Disallow: /mails/
Disallow: /modules/
Disallow: /translations/
Disallow: /tools/
Disallow: /lang-fr/

# Files
Disallow: /addresses.php
Disallow: /address.php
Disallow: /authentication.php
Disallow: /cart.php
Disallow: /discount.php
Disallow: /footer.php
Disallow: /get-file.php
Disallow: /header.php
Disallow: /history.php
Disallow: /identity.php
Disallow: /images.inc.php
Disallow: /init.php
Disallow: /my-account.php
Disallow: /order.php
Disallow: /order-slip.php
Disallow: /order-detail.php
Disallow: /order-follow.php
Disallow: /order-return.php
Disallow: /order-confirmation.php
Disallow: /pagination.php
Disallow: /password.php
Disallow: /pdf-invoice.php
Disallow: /pdf-order-return.php
Disallow: /pdf-order-slip.php
Disallow: /product-sort.php
Disallow: /search.php
Disallow: /statistics.php

# Sitemap

Edit :

Je viens de regarder de mon côté et effectivement j'ai pas mal d'erreur aussi

[kimzey]

merci pour ta réponse et pour ton aide.


Cependant ton robots.txt correspond à celui par défaut de prestashop et ne règle malheureusement pas mon soucis. J'ai fais des modifications sur mon robots.txt actuel et je verrai si ça une quelconque influence. En parallèle, j'ai posté une question sur le forum de google webmaster en espérant en apprendre un peu plus sur ce qu'il se passe.

Je vous tiens au courant :-)

[Djolhan]

C'est probablement des URL qui sont dans votre sitemap non ?

[kimzey]

Bonne idée mais non le sitemap ne comporte aucune adresse de ce type.

J'ai vraiment l'impression que le googlebot a décidé d'ignorer mon robots.txt pour une raison que j'ignore. Par ailleurs j'ai testé le robots avec l'outil disponible sur GWT et il marche parfaitement !

Bref c'est vraiment bizarre...

[Marc]

Bonsoir
Depuis la version 1.2 de presta il n'y a plus de fichier robot fourni. Faut-il en ajouter 1 ?
Merci

[marty69]

Bonsoir
Depuis la version 1.2 de presta il n'y a plus de fichier robot fourni. Faut-il en ajouter 1 ?
Merci

bonjour,

le fichier robots.txt n'est pas obligatoire mais fortement recommandé pour maitriser votre présence dans les moteurs
les htaccess et robots se génèrent depuis le back-office outils->générateurs
mais vous pouvez évidement aussi le créer à la main

[kimzey]

Oui si tu ne veux pas que google référence toute les pages de ton site y compris celles qui n'ont pas à l'être.

Je profite de ton message pour donner des nouvelles de mon cas, ainsi depuis quelques jours le problème semble se résorber reste à voir si ça continuera...

[Marc]

Bonsoir
J'avais oublié que les htaccess et robots se génèrent depuis le back-office outils->générateurs.
C'est fait
Merci

[Sébastien François]

L'augmentation des pages inaccessibles est un problème, mais je ne crois pas que l'augmentation des “Accès restreint par un fichier robots.txt” en soit un. Sauf si tu voudrais que ces pages soient indexées. Sinon, je crois que c'est juste google qui te "prévient" qu'il n'indexe pas ces pages car tu lui as demandé via ton fichier robots.txt.