para que termine en .htm debería bastar con ir a "opciones", "permalinks" y configurar una "estructura personalizada".
Armá tu estructura con la información de esta página:
http://codex.wordpress.org/Using_Permalinks
y simplemente le agregás ".htm" al final. Por ejemplo, los enlaces en mi sitio son
/categoria/id-titulo
teniendo esta estructura:
/%category%/%post_id%-%postname%
si quisiera que terminara en .htm simplemente debería poner
/%category%/%post_id%-%postname%
.htm
Saludos y suerte.