Problema con robots.txt

[pablisho]

Iniciado por Google

¿Qué significan los errores de URL caducadas?. El tiempo de espera de robots.txt ha caducado.
El tiempo de espera del servidor ha caducado al intentar acceder al archivo robots.txt. Antes de rastrear las páginas de su sitio, hemos intentado comprobar su archivo robots.txt para comprobar que no hemos rastreado ninguna página que haya excluido automáticamente. Sin embargo, hemos recibido un aviso de tiempo de espera caducado al intentar acceder al archivo robots.txt. Para asegurarnos de no rastrear ninguna página listada en ese archivo, hemos pospuesto el rastreo. Cuando esto ocurre, volvemos posteriormente al sitio y lo rastreamos una vez más después de acceder al archivo robots.txt. Tenga en cuenta que esto es diferente de una respuesta 404 al buscar un archivo robots.txt. Si recibimos un error 404, suponemos que no existe ningún archivo robots.txt y seguimos con el rastreo.

http://www.google.com/support/webmas...s&answer=35164