Hola, la respuesta es muy simple si trabajas con php.
Para tener una idea de donde irá cada cosa, primero tendrás que modificar una. pero simplemente luego lo puedes meter en un archivo con un nombre, por ejemplo (lateral.php)
y luego introducirlo en donde iría el código en cada página de la siguiente manera:
Código PHP:
<?php include (lateral.php) ?>
El único problema es que todas tus páginas tendrían que tener extensión .php, aunque sólo pusieses esa parte del código en php y todo el resto en html.
Espero que te haya servido, si te ha gustado la respuesta +1 en karma por favor