lo tienes en la propia explicacion
Código PHP:
<?
if(!isset($_SESSION['login'])){
echo "No estas logeado.<a href='entra.html'>Clic qui para logearse</a> o <a href='rg.html'>para registrase</a>";
} else {
echo "Hola ".$_SESSION['login'];
echo "<br><a href='salir.php'>Salir</a>";
}
?>
eso lo puedes colocar donde quieras