Como crear plantillas

[acrego]

Bueno despues de recopilar mucha información de como va el tema del css, ya me decidi a crear un sitio web por ahora no voy a utilizar ni asp, ni php, la duda me viene ahora.
Quiero crear un sitio con plantillas, es decir casi todas las paginas van a tener la misma estructura, una cabecera, un menu lateral y una capa central que tiene el contenido.
Lo que quiero hacer es que una vez que diseñe la cabecera y el menu lateral, le pueda crear como una plantilla, es decir que en un archivo los tenga y cuando quiera cambiar algo no tenga que ir pagina a pagina.

Alguno sabe como puedo hacer esto (sin usar el dreamweaver, que vi que tiene una opcion de plantillas).

un saludo