Puedes recompilar el kernel y mantener la versión antigua, incluso puedes tener varias versiones del kernel en el arranque. Todas ellas estarán disponibles desde el Lilo, de hecho te aconsejo que nunca borres la versión "de serie" que viene con tu sistema inicial.
Hay varias guías para recompilar el kernel, pero mi consejo es que te lo tomes con calma.
Puedes empezar por una de mis preferidas para los novatos (esta en un tono muy desenfadado y es bastante completa):
http://perso.wanadoo.es/exter/aarg/arg-kernel.html