como harían un spider con PHP ???

[isaacrc82]

Hola:

Tengo ciertas dudas sobre como hacer un spider, quisiera saber como harían un spider en php, que arquitectura usarían ? Para hacer un spider hay que indizar los datos cada cierto tiempo, como se hace esto con php ??? con un servicio web ???

Espero que alguien me pueda ayudar y argumentar sobre estas cosas.

Saludos
Le agradecería que me ayudara