Cita:
Iniciado por ernestomarrero 
Lo mejor es no inventar con eso si no sabes, lo mejor es dejarlo en blanco o poner solo los sitemaps. Hace poco hice un posts en mi blog acerca del tama, pero no puedo poner enlace porque me lo borran. Pero te puedo asegurar que lo mejor es solo poner los sitemaps o dejarlo en blanco, o incluso borrarlo del servidor, realmente eso no sirve para nada, todo lo que hace lo puedes configurar desde las herramientas para webmasters de Google o de Bing.
En serio no sirve para nada?
No todos opinan así. Voy a esperar si alguien mas tiene opinión sobre los robots.