Ver Mensaje Individual
  #4 (permalink)  
Antiguo 13/10/2010, 08:06
Avatar de nemesis866
nemesis866
 
Fecha de Ingreso: julio-2009
Ubicación: Jalisco, Mexico
Mensajes: 643
Antigüedad: 14 años, 10 meses
Puntos: 20
Respuesta: duda sobre robots.txt

Cita:
Iniciado por mawell Ver Mensaje
Pero es Disallow: /otracarpeta/*.html

o Disallow: /otracarpeta/*.html$

Y otra duda que tengo yo, se supone que si solo haces esto:

Disallow: /otracarpeta/

el robot de quiensea no entra en esa carpeta y por lo tanto no indexa el contenido no?
Pero a mi google si que me ha indexado un .html que tenía dentro de una carpeta denegada.

o es que tengo que ponerlo así: Disallow: /otracarpeta
(sin el slash final)
Hola maswell

No se debe incluir el simbolo $ al final de la linea, y si tienes razon, con solo colocar el disallow y el nombre de la carpeta sera suficiente para que el bot no ingrese a los archivos.

Saludos
__________________
Artículos de programación Web
Twitter.- @codeandoclub