Foros del Web » Programando para Internet » PHP »

Parseador potente en PHP

Estas en el tema de Parseador potente en PHP en el foro de PHP en Foros del Web. Muy buenas, tengo la siguiente duda: Estoy parseando los datos de una página web (utilizando PHP Simple HTML DOM Parser), mi problema es que éste ...
  #1 (permalink)  
Antiguo 11/07/2012, 15:05
 
Fecha de Ingreso: mayo-2012
Mensajes: 10
Antigüedad: 7 años, 8 meses
Puntos: 1
Pregunta Parseador potente en PHP

Muy buenas, tengo la siguiente duda:
Estoy parseando los datos de una página web (utilizando PHP Simple HTML DOM Parser), mi problema es que éste consume mucha memoria y me acaba tirando el servidor (lo he probado con apache y nginx, en windows y en linux).

También he probado eliminar el tiempo de ejecución de cada script en PHP y de asignarle más memoria, pero sigue petando.

He ido poniendo ->clear() cuando hacía falta y unset() en cada variable para intentar liberar lo más posible en memoria pero nada.

El script que he creado entre en una página "maestra" y de allí rastrea sus links (unos 160 aprox), o sea, realizo 161 conexiones, y luego parseo cada página.

¿Se os ocurre algo?

Muchas gracias!

Etiquetas: parsear, potencia, servidor
Atención: Estás leyendo un tema que no tiene actividad desde hace más de 6 MESES, te recomendamos abrir un Nuevo tema en lugar de responder al actual.
Respuesta




La zona horaria es GMT -6. Ahora son las 23:45.