Me gustaría saber si el siguiente archivo robots.txt es correcto.
Código:
User-agent: *
Allow: /privado/sitemap.xml
Allow: /privado/imagenes/
Disallow: /privado/
Sitemap: /privado/sitemap.xml
Lo que intento es que El directorio /privado/ no sea accesible por los buscadores, ya que tiene muchos ficheros y subdirectorios, pero uno de esos subdirectorios y el fichero sitemap.xml sean accesibles (rastreados e indexados).
¿Es correcto hacerlo así?