tania06 Posted May 4, 2018 Share Posted May 4, 2018 Bonjour Nous recherchons un free lance pour résoudre des erreurs que nous avons de type liens no follows , liens bloqués par robot.txt N'hésitez pas à me contacter Link to comment Share on other sites More sharing options...
Oron Posted May 8, 2018 Share Posted May 8, 2018 Bonjour liens bloqués par robot.txt ? le robots.txt ne bloque rien, sa seule fonction est d'indiquer aux crawler de google de référencer tel page ou dossier et de ne pas référencer tel autre dossier ! Donner des précisions sur vos erreurs et où vous voyez ces erreurs. Link to comment Share on other sites More sharing options...
Johann Posted May 8, 2018 Share Posted May 8, 2018 Il y a 3 heures, Oron a dit : Bonjour liens bloqués par robot.txt ? le robots.txt ne bloque rien, sa seule fonction est d'indiquer aux crawler de google de référencer tel page ou dossier et de ne pas référencer tel autre dossier ! Donner des précisions sur vos erreurs et où vous voyez ces erreurs. Je pense que c'était juste une formulation malheureuse, et que par "lien bloqué par le robots.txt", il fallait lire "URLs bloquées..." Tout comme dans ton message, il faut lire "ne pas crawler" au lieu de "ne pas référencer", car tu n'es pas sans savoir (enfin j'espère) que tu peux crawler une page sans l'indexer, et empêcher de crawler une page qui est déjà indexée, ce qui ne la désindexera pas pour autant, et que Google référence des URLs et non des "dossiers" Link to comment Share on other sites More sharing options...
Recommended Posts
Create an account or sign in to comment
You need to be a member in order to leave a comment
Create an account
Sign up for a new account in our community. It's easy!
Register a new accountSign in
Already have an account? Sign in here.
Sign In Now