eso no es un robots.txt. Eso es un txt con etiquetas de HTML que las metieron dentro de un archivo llamado robots.
un claro ejemplo de cómo usar el archivo robots
http://www.conectarnos.com/robots.txt
de hecho, si quiers bajatelo y editalo segun los directorio de su sitio que quieras que el buscador no indexe.
saludos,