Problema al indexar en google sitio programado en zend, ayuda!!

[chilancan]

Hola que tal, quiero ver si alguien me puede ayudar, he buscado por todas partes y no se que hacer porque no encuentro ningún error. Lo que sucede es que recientemente lanzé una web pero algo pasa que no la detecta el google bot ni algunos testers de sitios, algo raro pasa porque se visualiza bien en navegadores pero si en las webmaster tools de google analizo con el bot me aparece "url inaccesible", es como si el bot tratara de entrar a la pagina pero no detectara nada de contenido y no puede registrar nada de la web

El sitio es ordenale.com, lo que sospecho es que es algun problema relacionado con el zend framework ya que esta programada en él y de hecho tengo la misma problematica en otro sitio que también usa el zend.

Espero alguien me pueda ayudar.

Muchas gracias!!

Carlos

[Emirodgar]

No sé si te has fijado pero en Webmasters tools tienes una herramienta en beta para "ver" como ve GoogleBot una página.. podrías probarlo a ver si sacas algo en claro ;)

[facundocorradini]

Debe ser por el robots.txt y el sistema que estás usando para evitar los 404.

http://www.ordenale.com/robots.txt

El robots.txt es el archivo que le indica a los robots a cuáles páginas no quieres que accedan. Al no poder ver ese archivo, es normal que prefieran no ingresar.

Has un robots.txt apropiado y asegurate que esté accesible, eso debería resolver el problema.

[chilancan]

Gracias por sus comentarios, si la he checado en las webmaster tools pero precisamente el GoogleBot ni siquiera accede, me manda el error "Url inaccesible" siendo que los navegadores si la muestran bien.

El robots.txt ya lo probamos pero tampoco ha habido suerte :S es como si algunos sistemas y bots ni siquiera pudieran detectar la página porque de hecho he probado con el validador de la W3C y nisiquiera la lee, me marca directamente: 500 Internal Server error no entiendo que pasaaa!!!

No he encontrado nada al respecto en internet y lo extraño es que me sucede en 2 sitios diferentes programados por diferentes personas :S

Cualquier idea es buena, probaremos de todo para intentar resolverlo.

Saludos,

Carlos