No hay nada como leer la documentación oficial...
Aquí está la solución y acabo de probarlo y funciona perfectamente. Igual te recomiendo
esta guía de usuario de .htaccess, que a juzgar por la puntuación en los comentarios, debe estar muy buena...
Saludos