Foros del web, para los que viven de bits

Hola a todas las personas de esta comunidad. Hace años que estuve por aqui pero........


Mi pregunta es como dice el RE.
Necisito informacion sobre el fichero robots.txt.
Que ventajas me puede aportar y si con ello consigo posicionar mi pagina en buen posicion en buscadores

Gracias

Juan desde Asturias

El archivo robots.txt más común es el siguiente:

Line 1 User-agent: *
Line 2 Disallow:

El asterisco quiere decir todos. Es decir, todos los buscadores indexarán tu web si piensan que es relevante. Y el disalow, quiere decir los buscadores que no quieres que te visiten.

Más info sobre robots.txt en: http://www.webtaller.com/google/guia_robots.php
y en
http://www.google.es/search?sourceid...q=robots%2etxt

El archivo robots.txt lo tienes que localizar la carpeta principal de tu hosting.

Esta es una lista de los nombres de robots:
http://www.robotstxt.org/wc/active/html/index.html

Un saludo,
Alejandro.

Pues muchas gracias