Jump to content

Probleme sitemap et robots.txt


Recommended Posts

Bonjour,
Voulant mettre à jour mon sitemap via un site bien connu, impossible de mettre à jour celui ci, ile ne me trouve qu'une page, alors qu'hier il trouvait toute mes pages.
Aucun modif effectuée si ce n'est l'ajout de produits.

Le fichier robots en question :

# robots.txt automatically generated by PrestaShop e-commerce open-source solution
# https://www.prestashop.com - https://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# https://www.robotstxt.org/robotstxt.html
User-agent: *
# Allow Directives
Allow: */modules/*.css
Allow: */modules/*.js
Allow: */modules/*.png
Allow: */modules/*.jpg
Allow: */modules/*.gif
Allow: */modules/*.svg
Allow: */modules/*.webp
Allow: /js/jquery/*
# Private pages
Disallow: /*?order=
Disallow: /*?tag=
Disallow: /*?id_currency=
Disallow: /*?search_query=
Disallow: /*?back=
Disallow: /*?n=
Disallow: /*&order=
Disallow: /*&tag=
Disallow: /*&id_currency=
Disallow: /*&search_query=
Disallow: /*&back=
Disallow: /*&n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=discount
Disallow: /*controller=footer
Disallow: /*controller=get-file
Disallow: /*controller=header
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=images.inc
Disallow: /*controller=init
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=registration
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories for epicerie-aquitaine.fr
Disallow: /app/
Disallow: /cache/
Disallow: /classes/
Disallow: /config/
Disallow: /controllers/
Disallow: /download/
Disallow: /js/
Disallow: /localization/
Disallow: /log/
Disallow: /mails/
Disallow: /modules/
Disallow: /override/
Disallow: /pdf/
Disallow: /src/
Disallow: /tools/
Disallow: /translations/
Disallow: /upload/
Disallow: /var/
Disallow: /vendor/
Disallow: /webservice/
Disallow: /fr/app/
Disallow: /fr/cache/
Disallow: /fr/classes/
Disallow: /fr/config/
Disallow: /fr/controllers/
Disallow: /fr/download/
Disallow: /fr/js/
Disallow: /fr/localization/
Disallow: /fr/log/
Disallow: /fr/mails/
Disallow: /fr/modules/
Disallow: /fr/override/
Disallow: /fr/pdf/
Disallow: /fr/src/
Disallow: /fr/tools/
Disallow: /fr/translations/
Disallow: /fr/upload/
Disallow: /fr/var/
Disallow: /fr/vendor/
Disallow: /fr/webservice/
Disallow: /de/app/
Disallow: /de/cache/
Disallow: /de/classes/
Disallow: /de/config/
Disallow: /de/controllers/
Disallow: /de/download/
Disallow: /de/js/
Disallow: /de/localization/
Disallow: /de/log/
Disallow: /de/mails/
Disallow: /de/modules/
Disallow: /de/override/
Disallow: /de/pdf/
Disallow: /de/src/
Disallow: /de/tools/
Disallow: /de/translations/
Disallow: /de/upload/
Disallow: /de/var/
Disallow: /de/vendor/
Disallow: /de/webservice/
Disallow: /nl/app/
Disallow: /nl/cache/
Disallow: /nl/classes/
Disallow: /nl/config/
Disallow: /nl/controllers/
Disallow: /nl/download/
Disallow: /nl/js/
Disallow: /nl/localization/
Disallow: /nl/log/
Disallow: /nl/mails/
Disallow: /nl/modules/
Disallow: /nl/override/
Disallow: /nl/pdf/
Disallow: /nl/src/
Disallow: /nl/tools/
Disallow: /nl/translations/
Disallow: /nl/upload/
Disallow: /nl/var/
Disallow: /nl/vendor/
Disallow: /nl/webservice/
# Files
Disallow: /*fr/adresse
Disallow: /*fr/adresses
Disallow: /*fr/connexion
Disallow: /*fr/panier
Disallow: /*fr/reduction
Disallow: /*fr/suivi-commande-invite
Disallow: /*fr/historique-commandes
Disallow: /*fr/identite
Disallow: /*fr/mon-compte
Disallow: /*fr/commande
Disallow: /*fr/confirmation-commande
Disallow: /*fr/
Disallow: /*fr/suivi-commande
Disallow: /*fr/avoirs
Disallow: /*fr/recuperation-mot-de-passe
Disallow: /*fr/inscription
Disallow: /*fr/recherche
Disallow: /*de/adresse
Disallow: /*de/adressen
Disallow: /*de/anmeldung
Disallow: /*de/warenkorb
Disallow: /*de/Rabatt
Disallow: /*de/auftragsverfolgung-gast
Disallow: /*de/bestellungsverlauf
Disallow: /*de/profil
Disallow: /*de/mein-Konto
Disallow: /*de/Bestellung
Disallow: /*de/bestellbestaetigung
Disallow: /*de/
Disallow: /*de/bestellverfolgung
Disallow: /*de/bestellschein
Disallow: /*de/passwort-zuruecksetzen
Disallow: /*de/Registrierung
Disallow: /*de/suche
Disallow: /*nl/adres
Disallow: /*nl/adressen
Disallow: /*nl/aanmelden
Disallow: /*nl/winkelmandje
Disallow: /*nl/korting
Disallow: /*nl/bestelling-volgen-als-gast
Disallow: /*nl/besteloverzicht
Disallow: /*nl/identiteit
Disallow: /*nl/mijn-account
Disallow: /*nl/bestelling
Disallow: /*nl/order-bevestiging
Disallow: /*nl/
Disallow: /*nl/bestelling-volgen
Disallow: /*nl/bestel-bon
Disallow: /*nl/wachtwoord-opvragen
Disallow: /*nl/registratie
Disallow: /*nl/zoeken


Je n'arrive pas à comprendre où se trouve la restriction...
D'autant plus qu'à partir de mon backoffice Prestashop j'arrive à sortir un sitemap correct, de même avec des sites spécialisés en supprimant le fichier robots.txt
Merci d'avance

Edited by itrenew (see edit history)
Link to comment
Share on other sites

Bonjour,

Par les sites spécialisés, effectivement ! Alors qu'il y a deux jours cela fonctionnait parfaitement les URL étaient toutes reconnues .

Désormais via les sites spécialisés en sitemap, une seule URL alors qu'avez le back office j'ai tout dans mon sitemap.

Quand je supprime le fichier robots.txt, aucun soucis via les site spécialisés tout redevient comme avant avec toutes les URL.

Je remet le robots.txt une seule URL...

Link to comment
Share on other sites

Posted (edited)

Oui, exemple réalisé à l'instant :

Avec fichier robots.txt Ici

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9 http://www.sitemaps.org/schemas/sitemap/0.9/sitemap.xsd">
<!--  created with Free Online Sitemap Generator www.xml-sitemaps.com  -->
<url>
<loc>https://epicerie-aquitaine.fr/fr/</loc>
<lastmod>2024-08-06T12:18:09+00:00</lastmod>
</url>
</urlset>

En supprimant robots.txt : Ici

Sitemap complet donc pas besoin de la mettre en code ici

Edited by itrenew (see edit history)
Link to comment
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
×
×
  • Create New...