Rolly .. la base es esa .. Debes acomular en una varaibel todo el HTML que generes que será tu página .html y luego hacer un frwrite() (con su fopen() donde le daras el nombre al archivo a generar: nose.html)
Ejemplo:
Código PHP:
$html="<html><head><title>blbalbla</title></head><body>";
while($row=mysql_xxxxx){
$html .= $row['nose']."<br>";
}
$html .="</body></html>";
Realmente puedes usar muchos tipos de sintax (como Here Doc por ejemplo) para facilitarte la taréa .. Incluso usar "motores de plantillas" (como Smarty .. NokTemplates .. etc) para poder diseñar tu HTML tranquílamente con tu mejor editor HTML visual e incorportar las "variables" (PHP) donde las necesites y todo eso generar ese .html que luego escribiras en un archivo.
Un saludo,