¿ Que les parece ese Robots.txt ?

[exatienda]

Lo veo un poco mejor que antes aunque yo quitaría los Disallow: / de todos los buscadores, de acuerdo que el 80% del tránsito web és Google pero no menosprecies el resto de buscadores.

Si te sirve de ayuda, yo tengo wordpress como web principal y no hago ningún disallow en el robots.txt y nunca me he encontrado que los crawlers indexen algo que no quiero.