Ver Mensaje Individual
  #14 (permalink)  
Antiguo 13/05/2004, 10:34
josemi
Ex Colaborador
 
Fecha de Ingreso: junio-2002
Mensajes: 9.091
Antigüedad: 21 años, 11 meses
Puntos: 16
El robots.txt por si solo no es suficiente. Utilizalo solo para lo que quieras que no sea indexado por buscadores, pero que no te importa que vea la gente normal (directorio de imagenes, por ejemplo). O para paginas que sea necesario estar autentificado, ¿para que molestar a los bots para que intenten acceder a una pagina que no pueden?

Pero el robots.txt no es ninguna proteccion. Poner en el robots.txt una indicacion al directorio "base_datos" no va a impedir que un ser maligno entre en ese directorio. Hay que proteger los contenidos de los directorios. Y luego si es necesario le indicas a los buscadores que no intente indexar esos contenidos.

Como dice Cain, a veces es darle pistas al enemigo. Otras se usan como señuelos (poner en el robots.txt un directorio con un nombre "suculento" y vigilar que IPs/useragents intentan accederlo; seguro que son los "malos").

Saludos.
__________________
Josemi

Aprendiz de mucho, maestro de poco.