Ver Mensaje Individual
  #2 (permalink)  
Antiguo 23/02/2014, 05:17
Usuarios466
Invitado
 
Mensajes: n/a
Puntos:
Respuesta: web con robot.txt durante 4 años con User-agent: * Disallow: /

Cita:
Iniciado por JustinKO Ver Mensaje
Teóricamente esto haría que los motores de búsqueda ignoraran por completo la web ¿no?
Así es, el comando "Disallow: /" hace que restrinjas el indexado de toda la página y y poniendo el asterisco al "User-agent" haces que sea a cualquier bot.

Por lo tanto, al suprimir la barra inclinada de la acción "Disallow: /" no debes tener más problemas con el indexado y de ahora en adelante Googlebot y los demás te podrán rastrear e indexar.

Cita:
User-agent: *
Disallow:
Cita:
Iniciado por JustinKO Ver Mensaje
y si es así ¿puede esto afectar negativamente al SEO de la web nueva que le estoy desarrollando por algún tipo de penalización? ¿o simplemente empiezan a funcionar como si fuera totalmente nueva?
¿Qué tipo de penalización tenía la página si no estaba indexada en las SERPS?

Cita:
Iniciado por JustinKO Ver Mensaje
Otra cosa, si buscas por el nombre de su empresa te aparece esto como descripción:

No hay disponible una descripción de este resultado debido al archivo robots.txt de este sitio. Más información
Ese mensaje aparece porque la página estaba bloqueada por medio del robots.txt, es cuestión de tiempo y paciencia que Google rastree de nuevo la página y reemplace una nueva descripción.