Foros del Web » Estrategias Digitales y Negocios Online » SEO »

como hacer robots.txt sin restringir nada?

Estas en el tema de como hacer robots.txt sin restringir nada? en el foro de SEO en Foros del Web. tengo entendido que es facil pero cuando lo hice con la herramienta de webmaster de google quedo asi: User-Agent: * Allow: / Y cuando miro ...
  #1 (permalink)  
Antiguo 14/06/2009, 03:04
 
Fecha de Ingreso: julio-2008
Mensajes: 162
Antigüedad: 15 años, 8 meses
Puntos: 0
como hacer robots.txt sin restringir nada?

tengo entendido que es facil pero cuando lo hice con la herramienta de webmaster de google quedo asi:

User-Agent: *
Allow: /


Y cuando miro otras paginas de explicacion de como hacerlo hablan de "Disallow"

¿podrian explicarme como hacer? Simplemente quiero que google agarre todas las paginas, no quiero bloquear nada.

Muchisimas gracias.
  #2 (permalink)  
Antiguo 14/06/2009, 07:52
Colaborador
 
Fecha de Ingreso: julio-2008
Ubicación: Consultor SEO
Mensajes: 2.937
Antigüedad: 15 años, 9 meses
Puntos: 185
Respuesta: como hacer robots.txt sin restringir nada?

Ya esta bien como lo has puesto...
El "disallow" es para NO permitir que entren los rastreadores... :P
__________________
Consultor SEO - Manual SEO
Sigueme en twitter @VictorHdez
  #3 (permalink)  
Antiguo 14/06/2009, 13:15
 
Fecha de Ingreso: octubre-2001
Ubicación: Argentina
Mensajes: 848
Antigüedad: 22 años, 6 meses
Puntos: 28
Respuesta: como hacer robots.txt sin restringir nada?

Si la idea es que google rastree todo ese robots.txt está bien, pero es completamente superfluo, lo que está diciendo es: Googlebot pasá a hacer lo que venías a hacer.

Saludos.
Zero Zen.
__________________
Diseño + Hosting
Atención: Estás leyendo un tema que no tiene actividad desde hace más de 6 MESES, te recomendamos abrir un Nuevo tema en lugar de responder al actual.
Respuesta

SíEste tema le ha gustado a 1 personas




La zona horaria es GMT -6. Ahora son las 09:38.