Tu comportamiento es bastante irreverente *santiagoanuncios*
Google aclara, adecuadamente, que robots.txt contiene declaraciones que no resultan restrictivas; además, la recomendación para evitar cualquier tipo de rastreo es
proteger los archivos privados mediante contraseña.
—Vía
Información sobre los archivos robots.txt Cita: Lo que te confunde es que la ponga en los resultados de búsqueda, y eso sucede porque la página ya la tenía indexada anteriormente, pero como ahora no la puede rastrear, en las serp pone ese mensaje, que es muy claro, no sabe el contenido que tiene actualmente esa página.
A mí este tipo de casos no me confunde; el ejemplo que he presentado las URLs nunca han estado indexadas. Se trata de un sitio de mi propiedad, que recientemente ha salido de la etapa de pruebas y ahora está publicado. No comprendo como estás asumiendo que en algún momento esas URLs han estado indexadas.
Finalmente, te recomiendo llames a las cosas por su nombre; desde
mayo pasado la herramienta ha dejado de llamarse Webmaster Tools en favor de
Search Console