Tema: robots.txt
Ver Mensaje Individual
  #6 (permalink)  
Antiguo 27/02/2009, 18:13
Avatar de Ruchu
Ruchu
 
Fecha de Ingreso: octubre-2001
Mensajes: 698
Antigüedad: 22 años, 7 meses
Puntos: 2
Respuesta: robots.txt

Cita:
Iniciado por pablisho Ver Mensaje
Exactamente Matda! Si querés eliminar 'X' carpeta la línea debería quedar así:
Código:
User-agent: *
Disallow: /carpeta-que-quieras-excluir/
Creo que no es así exactamente.

Tal y como has indicado, si que indexaria el directorio /carpeta-que-quieras-excluir/ pero no indexaria /carpeta-que-quieras-excluir/algo...

Si quieres que ni indexe el directorio deberías poner /carpeta-que-quieras-excluir (sin la barra final).