Hola a todos,
Como hacer para que el robots.txt no siga urls con problema de duplicado de meta y title... y la ostia.
Ejemplo: puntocom/informatica/page/1/ ... page/2/ ... etc, que en realidad es una url que lleva a los mismos post y la imposibilidad de colocarle link cannonical me ha dejado solo la alternativa de restringir este tipo de url por robots.txt pero la verdad es que no encuentro info para este caso en particular.
Las otras url con problemas son las del tipo puntocom/informatica/2010/03/01/el-chip-loco/ y puntocom/informatica/2010/03/01/el-chip-loco/comments/ me gustaria saber como deshabilitar todo aquello que contenga la palabra "comments".
pues si coloco:
Disallow: puntocom/informatica/2010/03/01/el-chip-loco/comments/ tendria que ponerle un disallow a comentarios de cada post.
uff!,
La otra duda es si este "Disallow: puntocom/informatica/2010/03/01/el-chip-loco/comments/" no me deshabilita por defecto a puntocom/informatica/ o sea todo lo que está en esa categoria y la categoria inclusive?
Que lio!.
Gracias de antemano.
