Ver Mensaje Individual
  #6 (permalink)  
Antiguo 02/03/2011, 12:56
Avatar de cletucms
cletucms
 
Fecha de Ingreso: febrero-2011
Mensajes: 120
Antigüedad: 13 años, 3 meses
Puntos: 21
Respuesta: Voy a colgar una BETA para pruebas

... caramba que es queee

Tienes que crear un fichero con el bloc de notas y lo llamas robots.txt. Lo abres, y pones esto:

User-agent: *
Disallow: /

Lo guardas y lo pones en la raiz (en la misma carpeta que el index.html)... esto sólo te sirve así si no tienes nada en el dominio, si lo tienes, mejor pon:

User-agent: *
Disallow: /directorioquesea/

Cuando abras la web al público recuerda quitarlo o adaptarlo para que impida el acceso sólo a los directorios privados...

Es importante no hacer el bestia con el robots.txt (por eso te he dicho de ponerlo en un directorio interior)... nosotros la cagamos en octubre con una tontería de estas (por no mirar cuando incorporamos unas mejoras). En 15 días las visitas cayeron una brutalidad, y todavía no hemos recuperado e los niveles de tráfico anteriores.

Suerte.