Barra lateral con actualización automática

[enrihhe]

Buenas a todos.
He aquí mi primer tema en el foro, así que pido disculpas si este tema ya se ha tratado anteriormente. Mi pregunta es la siguiente:
Estoy construyendo una página web en html, y me gustaría colocar una barra lateral a la derecha con alguna información relacionada con mi web. Esta barra iría en la portada de mi sitio. Hasta aquí, todo fácil.
Sin embargo, me gustaría poner también, en las páginas y subpáginas dentro de mi web LA MISMA barra lateral. Es decir, que me gustaría, de alguna forma, crear un especie de copia de mi barra lateral en todas (o algunas) de las subpáginas.
Querría saber si hay alguna forma de hacer esto sin tener que copiar la dichosa barra en cada página, pues sobre todo quiero poder actualizar todas las barras cambiando solo la de la portada.
Como no sé si está muy claro, pongo aquí un par de enlaces de la web del Real Madrid, donde se ve claro:

http://www.realmadrid.com/cs/Satellite/es/Home.htm

http://www.realmadrid.com/cs/Satellite/es/1330056624870/noticia/Cronica/2-6:_El_Madrid_golea_con_un_Ronaldo_estelar.htm

Como veis, en ambas páginas está LA MISMA barra lateral a la derecha, con los mismos enlaces e imágenes, y esto se repite en todas las subpáginas de la web, así que no creo que las actualicen todas, sino que está hecho de tal forma que con cambiar la de la portada cambian las demás.
Muchas gracias de antemano.