Googlebot Acceder De Los Robots.txt.

[canaryga]

Hola GOOGLEBOT

 

Me gustaría saber ¿ donde se activa el permiso para permitir el paso de los robots de google?.

Porque tengo un error de googlebot el cual tengo en teoria "bloqueada la entrada de los robots en mi pag web."

¿Los modulos que pueden que este relacionado para resolverlo pueden ser estos?

1º google analytics

2º google sitemap

3º tools generator

 

Google me dice que puede ser por estas razones;

• Check the configuration of your firewall and site to ensure that you are not denying access to googlebot.
  
• If your robots.txt is a static page, verify that your web service has proper permissions to access the file.
  
• If your robots.txt is dynamically generated, verify that the scripts that generate the robots.txt are properly configured and have permission to run. Check the logs for your website to see if your scripts are failing, and if so attempt to diagnose the cause of the failure.
  

Google me enviaron este mensaje;

"Over the last 24 hours, Googlebot encountered 1 errors while attempting to access your robots.txt. To ensure that we didn't crawl any pages listed in that file, we postponed our crawl. Your site's overall robots.txt error rate is 100.0%."

¿ Que debo de hacer? ¿Cual es el problema?

Muchas gracias!!!!