Programa Bots para pagina web

josekote · #1 (**permalink**) 14/12/2011, 15:31

Hola amigos necesito saber si existe o si se puede hacer un programa o alguna herramienta que pueda ir a una pagina web especifica y dentro de esa pagina existen varios link de descarga directa y que este bots pueda descargar uno por uno

AGRADECERÍA SUS RESPUESTA

#2 (**permalink**) 14/12/2011, 16:36

Sí, claro que se puede. Fijate el módulo urllib2.

razpeitia · #3 (**permalink**) 14/12/2011, 17:34

Mejor aun!!!

Un framework como Scrapy

_Adrian_ · #4 (**permalink**) 14/12/2011, 21:54

... o Requests.

josekote · #5 (**permalink**) 19/12/2011, 08:12

Cita:

Iniciado por razpeitia

Mejor aun!!!

Un framework como Scrapy

He descargado lo scarpy pero o consigo acceder a una pagina especifica y descargar el contenido del link favor ayudarme si tienes mas datos como lo puedo hacer o si existe otro programa! muchas gracias

razpeitia · #6 (**permalink**) 19/12/2011, 13:00

Cita:

Iniciado por josekote

He descargado lo scarpy pero o consigo acceder a una pagina especifica y descargar el contenido del link favor ayudarme si tienes mas datos como lo puedo hacer o si existe otro programa! muchas gracias

Para eso tienes que programar tu, toda la parte de web scraping.

Ahí un tutorial en caso que no estés familiarizado con los conceptos básicos.

Si es algo enorme lo que planeas hacer entonces, te comiendo que uses scarpy.

De lo contrario si es algo muy pequeño, 10-20 links entonces salva los links en un archivo de texto plano y pásaselos a un wget.