Si te he entendido bien lo que tienes que hacer es un condicional if de manera que si hay contenido, te muestre lo que quieras entre tus divs, y si no hay no te los muestre
Código PHP:
Ver original<?php
if ($contenido = TRUE) {
?>
<div id='div_titulo_videos_evento'>
<a class="titulo_video_evento">Videos del Evento</a>
<div id="videos_evento_div">
</div>
</div>
<?php
} else {
//lo que quieras cuando no haya contenido.
}
?>
solo tienes que adaptarlo a tu código