Ver Mensaje Individual
  #5 (permalink)  
Antiguo 15/09/2004, 11:24
SidV
 
Fecha de Ingreso: mayo-2004
Ubicación: CABA - Argentina
Mensajes: 278
Antigüedad: 20 años
Puntos: 3
e¿?
El robot.txt trabaja bien... y lo podes usar tranquilamente para que te indexen los bots de los buscadores, el unico peligro es cuando indexan todo tu site, y gente "lammerosa" empieza a hurgar para hacer daño.
Por eso hay que saber que "ignorar"

----------------------robot.txt-----------------

User-agent: *
Disallow: /carpeta 1/*
Disallow: /carpeta 2/*
Disallow: /carpeta 2/subcarp 1/*
Disallow: /carpeta 1

-------------------------------------------
Asi funca, y en mi site no especifique que entre googlebot, puse * (es decir todos) y google entra tambien :D

Salu2
__________________
ReC Blog =)