Cita:
Iniciado por phpdevelopment 
Y eso es bueno para que se posicionamiento web o no beneficia...?
Si estamos hablando de un documento que no quiero que Google lo muestre en sus resultados; es la decisión acertada.
Si tengo el sitio en desarrollo y no quiero que indexen mi contenido; está bien implementarlo.
Si mi opción no es ninguna de ambas (anteriores) mejor quitar esa línea.
Cita: Para que sirve la indexacion
Para que tu sitio aparezca en los resultados de búsquedas orgánicos
