¿Cómo evitar duplicar código?

[occiso]

Saludos,

Estoy intentado diseñar mi primera página web personal. El sitio consta de varios archivos .htm correspondientes a los diferentes enlaces del menú. Esos archivos .htm tienen el mismo código para indicar una cabecera, un menú y un pie de página. La duda es la siguiente:

¿Existe alguna manera de indicar en cada .htm que ese código es el mismo en las diferentes páginas y que si lo modifico en una lo haga en todas?

No sé si queda clara la pregunta; concretaré con un ejemplo. Si tengo que añadir una opción más al menú, la tengo que añadir a todas las páginas de mi sitio -una por una- y a mí lo que me interesaría es que modificándola en una el cambio ya se reflejara en el resto.