Alguien ha usado scrapy para hacer un servicio de scraping?  Quiero
montar un servicio (REST) basado en scrapy, pero por defecto scrapy
procesa una cola de urls y termina y no creo que sea buena idea
levantar la aplicación cada vez que llega una url. Me gustaría que la
cola estuviera escuchando, procesara la cola y en lugar de esperar que
se quedara esperando a recibir una nueva entrada.

Supongo que se podrá hacer mirando a fondo la arquitectura (twisted)
de scrapy ... pero si alguno lo ha hecho antes :)



Saludos,

-- luismiguel  (@lmorillas)
_______________________________________________
Python-es mailing list
Python-es@python.org
https://mail.python.org/mailman/listinfo/python-es
FAQ: http://python-es-faq.wikidot.com/

Responder a