Ver Mensaje Individual
  #3 (permalink)  
Antiguo 16/03/2011, 12:03
lauri_lunae
 
Fecha de Ingreso: febrero-2011
Mensajes: 26
Antigüedad: 13 años, 2 meses
Puntos: 0
Respuesta: Construcción correcta del robots.txt

Hola, gracias por responder

Lo de la metaetiqueta ya me ha quedado claro como funciona, he buscado algo de información en internet y ya he visto que es para indicar a los rastreadores que rastreen o no tu sitio, sigan tus enlaces... según los parámetros que le añadas.

En cuanto al robots.txt tengo una duda, se puede hacer esto???

User-agent: *
Sitemap:www.dominio.com/sitemap.xml
Disallow: /carpeta_antigua/ficha.asp?id=424
Disallow: /carpeta_antigua/ficha.asp?id=425
Disallow: /carpeta_antigua/ficha.asp?id=426

Sitemap:www.dominio2.com/sitemap2.xml
Disallow: /carpeta_antigua/ficha.asp?id=24
Disallow: /carpeta_antigua/ficha.asp?id=25
Disallow: /carpeta_antigua/ficha.asp?id=26

Tengo 2 dominios cuya raíz es la misma ya que comparten la misma plantilla para generar sus webs, eso si evitando ducplicar contenido para que no te penalicen. Y desde webmasters tools he seleccionado un sitemap diferente para cada dominio, pero con el robots.txt no se pued, sólo puede haber uno en la raíz... no sé como hacerlo si no :(