hola alette, solo desabilitas los archivos html de tu directorio raiz, si quisieras los de otra carpeta solo agrega el nombre de la misma de la siguiente forma.-
Código robots.txt:
Ver originalUser-agent: *
Disallow: /*.html
Disallow: /carpeta/*.html
Disallow: /otracarpeta/*.html
Saludos