robots.txt
 

Holas, una pequeña duda sobre el archivo robots:

cuando le pides que Disallow: fichero.php realmente que le dices? que el robot no indexe este fichero o que no lo lea?

Mi duda esta en que si pongo en el robot:

Disallow: fichero.php

pero luego permito un fichero index.php que incluye este fichero.php. El robot leera el contenido incluido en index.php o pasara de el??

gracias por adelantado

Hola abe_k,

Cuando aplicas Disallow le dices al robot ambas cosas: que no lo lea y por lo tanto que no lo indexe.

En esto claro que habría que ver que tan "honestos" son los robots, y si no los leen realmente. El robots.txt lo colocas allí para que los robots le obedezcan, pero ¿quien te garantiza que lo haga?.

O es que seré muy paranóico a veces? jejeje

Saludos

Si haces un inlcude te lo va a leer igual, ya que google no lee php sino html.

salu2