Es el problema de siempre: en los navegadores que respetan el estandar, un contendor no crece si las cosas que tiene dentro están flotadas. En IE si crece.
Se resuelve generalmente dando un corte al final del contenido, es decir, en tu caso, poniendo algo como esto justo antes de cerrar la p de cada bloque que quieres que quede encerrado en ese borde amarillo:
<div class="corte"></div>
y añadiendo en tu hoja css:
.corte {clear: both;}
Mikel.