HTML - capas en html

Buenas, estoy haciendo una página web con 3 capas (cabecera, menu lateral y centro), para cada opcion del menu lateral tengo hecho un enlace a un archivo html con la misma distribución de la pagina principal, en definitiva es una pagina como si tuviera 3 marcos.

Mi pregunta es: hay alguna opcion para no tener que modificar todas las páginas cuando modifico el menu lateral, a lo mejor agrego al menu lateral una nueva opcion y tengo que agregarlo en todas las páginas por lo que veo un atraso. Os pongo mi codigo y a ver si alguien me dice como podria hacerlo

<div> <img src="fondo.jpg" height="100" width="1250" >
</div>

<div id="prueba" ...>
... codigo ...
</div>

<div style="margin-top:1%; margin-right:1%">
</div>

Asi en todos los archivos que tengo, una solucion que he pensado es hacer el menu lateral en una pagina html y que en la capa del menu lateral enlace a esa pagina

Gracias anticipadas