Cita:
Iniciado por Tedel 
Me gustaría saber por qué consideras que es una buena práctica.
El archivo robots.txt normalmente Google se lo descarga una vez cada 24 horas, pero un archivo .html se lo descarga cuando pasa por ahí, y puede pasar tanto en minutos como horas o días (semanas), por eso creo que si por ejemplo no quieres indexar una página se haga uso de ambos, tanto de la metaetiqueta (noindex, nofollow) como del robots.txt (disallow). Si hay posibilidad de utilizar ambos, ¿por qué no utilizar ambas acciones y aprovecharse de las mismas?