Ver Mensaje Individual
  #1 (permalink)  
Antiguo 31/08/2009, 10:49
cribelo
Usuario no validado
 
Fecha de Ingreso: agosto-2007
Mensajes: 141
Antigüedad: 16 años, 8 meses
Puntos: 1
De acuerdo en robots.txt pongo los includes?

Hola, tengo una pagina con php mysql.
Las paginas proncipales estan el public_html
encuestas.php
frases.php
noticias.php
index.php
articulos.php


pero as su ves tengo las carpetas
encuestas
frases
noticias
articulos


frases.php por ejemplo es asi:
<?
include("includes/head.php");

include("includes/left.php");
include("frases/body.php");
include("includes/right.php");
include("includes/pie.php");
?>

se ve, el cuerpo de frases.php lo saca de la carpeta frases,
ahora mi pregunta es.
Debo poner en robots.txt que no ingrese a la carpeta frases?


asi?

User-agent: *
Disallow:
Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /includes/
Disallow: /frases/

esto lo mismo para encuestas, noticcias, etc


bueno graciasss