Ver Mensaje Individual
  #1 (permalink)  
Antiguo 07/03/2008, 21:27
Avatar de farra
farra
 
Fecha de Ingreso: marzo-2008
Ubicación: Aqui estoy
Mensajes: 574
Antigüedad: 16 años, 1 mes
Puntos: 20
De acuerdo Script Sitemap Google!

necesito un script php (SPIDER) donde le introdusca la URL de mi sitio y recorra la pagina hasta una profundidad de 2 pero solo los enlaces internos... y que guarde cada enlace en una BD cada URL..
por que despues tengo un archivo que me genera un Sitemap de google pero tengo que poner todas las url separadas por lineas, encontre un website que hace esto pero solo para 500 url y mi sitio tiene como 5000 enlaces internos...

alguien me da una idea de como puedo hacer un script de este tipo?