Primero decirte que el archivo es "robots.txt"
Luego...
User-Agent: *
Disallow: /carpeta1/carpeta2/
Añade la "/" al final para indicar que es una carpeta. Así no indexa el contenido de esa carpeta.
Puedes leer también estos consejos para
crear un archivo robots.txt