no es necesario lo que haces... seguro!!
 
con tan solo colocar el código como puse... compruébalo....  
Código:
 RewriteCond %{REQUEST_URI} !-d
   NOTA que no necesita parámetro alguno a la derecha del operador (-d) 
lo único que si te pido.... es colócalo justo como la lógica exige... como es una condición debe ir antes de la re-escritura... suerte!