Ver Mensaje Individual
  #2 (permalink)  
Antiguo 17/08/2011, 08:43
Curio96
 
Fecha de Ingreso: agosto-2011
Mensajes: 12
Antigüedad: 12 años, 8 meses
Puntos: 5
Respuesta: Robots.txt url duplicadas

Si lo haces de la manera que indicas, el robots.txt te bloqueará todo lo que vaya a continuación del asterisco, por lo tanto, bloquerá ambas url's.

Lo mejor es hacer tu mismo la prueba en Herramientas para webmasters/información del sitio/acceso a rastreadores/probar robots.txt

Para eliminar los duplicados, la mejor forma es utilizar el archivo .htaccess si tu servidor trabaja con apache.

Para el tema del archivo .htaccess echale un vistazo al foro de apache: http://www.forosdelweb.com/f58/