Hola kezman10,
Como estas en php te lo hago en PHP.... ;). En php existe un modo de incluir en los HTML otros HTML... bueno mejor dicho PHP en PHP. ¿Tu pagina soporta PHP?, en caso de ser afirmativo lo mejor seria que cambiases las extensiones de tus HTML por PHP... no estoy muy seguro pues yo no trabajo con archivos de ese modo... pero creo que existe la posibilidad de reproducir PHP en un HTML... pero lo desconozco. Bueno el caso, como estas en PHP... supongo que cambiaras a PHP tus archivos... Para hacer lo que quieres se hace con:
Pon este codigo donde quieras tener ese menu:
Debes crear el archivo mi_menu.php ponerlo en la raiz y listo. Ese archivo tendra el menu.
Hasta pronto!.