No consigo hacer funcionar Sphider

[Lummox]

Hola, estoy intentando instalar un buscador interno para mi web. Despues de ver las opciones que tengo, la cosa esta entre el script "Sphider" o el buscador que ofrece google, asi que como veo que el "Sphider" es mas rapido a la hora de incluir nuevo contenido, me he decidido por este.

El caso es que he instalado segun la documentacion de la pagina del script, es decir.

1º Creo la base de datos
2º Modifico los 2 archivos necesarios para que reconozca la base de datos y el usuario admin
3º Inicio la instalacion
4º Añado un nuevo sitio, mi pagina web, y luego le doy a indexar...

Bien, pues hasta ahi me quedo, por que no encuentra nada de nada, ni un solo enlace o texto.

He probado a poner mi direccion de varias formas, sin el "http://" sin el "www." y asi con las posibles conbinaciones. Pero siempre me dice que no hay nada que indexar.

Bien, de la unica manera que parece que haga algo, es si marco la opcion de "Spider can leave domain", lo que pasa que de esta manera, no busca realmente nada en mi sitio, si no que enlaza paginas que no tienen nada que ver con mi sitio, supongo que cogera enlaces que hay en mi web y se pondra a buscar e indexar esos enlaces, pero no los de mi web.

Que esto haciendo mal?, la pagina web la tengo alojada en mi propio servidor web "casero", bajo Appserv.

Ya no se me ocurre que hacer para hacer funcionar este, en principio, sencillo buscador.

A ver si me podeis ayudar...

Saludos.