Paginar .. es lo que necesitas .. Para eso debes de leer tu .txt como ya lo estaras haciendo hacia un array y de ahí gestionarlo para solo presentar N elementos por página .. seguido de la generación de links para indicar indices de inicio para las siguientes páginas ..
En resumen .. te hace falta estudar bien como se manejan arrays en PHP:
http://www.php.net/manual/en/function.array.php http://www.php.net/manual/en/ref.array.php
Un saludo,