En todo caso intenta con la Distro padre de Ubuntu, Debian
, consiguete el disco Netinst (pesa unos 180MB), que te instala solo el sistema base (sin entorno grafico), ya despues de instalarlo solo con un comando tan sencillo como:
apt-get install xserver-xorg gdm xfce4
Deberias de tener xfce andando sobre debian.
Un Saludo.