Ver Mensaje Individual
  #2 (permalink)  
Antiguo 24/09/2009, 04:40
yo_pismo
(Desactivado)
 
Fecha de Ingreso: julio-2004
Ubicación: https://t.me/pump_upp
Mensajes: 26
Antigüedad: 19 años, 9 meses
Puntos: 1
Respuesta: ayuda configuracion robots.txt con smf

¿Has probado con el símbolo que determina cualquier carácter pero uno sólo? , El asterisco determina cualquier conjunto de caracteres de cualquier longitud, hay otro que determina un único caracter, si pones una regla que no indexe esas urls que indicas en las cuales el ID tiene 2 caracteres seguidos por ".html" ya te valdrá, porque te indexaría del 0 al 9, es un mal menor.

La otra forma de hacerlo perfecto es con EXPRESIONES REGULARES, en las cuales podrás definir que quieres excluir todas las urls que contengan ese ID con cualquier identificador que no sea el "0", y así te quedas siempre con la url con el ID "0" como máximo.


De todas formas esas urls tienen pinta de ser posts y no topics, si es así, yo me quedaría sólo con las urls de los topics y listo, excluyendo todas las urls de los posts, porque son versiones con contenido duplicado todas ellas.