Duda con plantillas

[Asturia]

Buenas! Soy nuevo en el foro. Soy autodidacta y leo mucho pero tengo una duda muy grande que leo y releo y no hay caso.

Leí todos los post que pusieron sobre el tema del uso de marcos, divs, css y "la mar en coche" (ja,ja) pero hay algo que no termino de entender cómo se logra hacerlo y no encontré ningún tuto que me indicara justo eso:

Sé que no tengo que usar frames porque trae mucha complicación. Leí en uno de los post que se hace usando divs. La Pregunta es (porque no encuentro dónde o como buscar) cómo se hacen esos divs. Qué pasos tengo qué hacer?

Por otro lado, veo un sitio (por ej.) como este:w w w.ferreteriadigital.com veo el codigo fuente y me avivo que no usaron frame entonces... cómo se hace para que la parte de la botonera de la izquierda quede estática y cuando se abre una nueva sección, lo unico que se refresca en la pagina es esa nueva sección porque el resto queda todo fijo, como si estuviera "pegado". Cómo se logra eso?
Muchas gracias