Ver Mensaje Individual
  #2 (permalink)  
Antiguo 14/07/2010, 17:07
Avatar de Daniel Ulczyk
Daniel Ulczyk
Super Moderador
 
Fecha de Ingreso: febrero-2005
Ubicación: Buenos Aires
Mensajes: 9.264
Antigüedad: 19 años, 2 meses
Puntos: 2114
Respuesta: Wordpress robots.txt

El robots.txt es una herramienta de grado restrictivo—imparte directivas a los crawlers, sobre carpetas que no deben rastrear e indexar—
Si no existen áreas en tu Web que necesiten se evite el acceso a los crawlers ni siquiera hace falte que pienses en él.
__________________
—Somos lo que hacemos repetidamente. La excelencia, entonces, no es un acto sino un hábito. (Aristóteles dixit)