Problema con urls amigables

[chinpun]

Hola a todos, soy nuevo en este foro y no estoy seguro si esta pregunta va aquí o en otro lado, si me equivoco perdonarme.
Estoy creando mi primera página web con posicionamiento seo y al hacer las urls amigables con el archivo .htaccess tengo un problema. Cuando escribo en la barra de dirección del navegador: www.misitio.com/contacto/asi me sale la página contacto sin estilo cuando lo que quiero que pase es que salte la página de error 404.
Mi archivo .htaccess es el siguiente:
# INICIAMOS SOBREESCRITURA
RewriteEngine on

# CAMBIOS DE LOS ENLACES
RewriteRule ^inicio index.php [L]
RewriteRule ^producto/(.+) productos.php?id=$1 [L]
RewriteRule ^productos productos.php [L]
RewriteRule ^empresa empresa.html [L]
RewriteRule ^contacto contacto.php [L]

Me podeis ayudar con este problemita?
Un saludo y gracias