miércoles, diciembre 06, 2017

Simple ejemplo Scraping con Casperjs



Pues bien.. una entrada mas para este blog, ya que tiene mucho tiempo que no archivo mis actividades. Esta ocasión quiero plasmar un pequeño ejemplo que hice para tenerlo como referencia y que en algún momento le de mayor utilidad pues este ejemplo solo lo hice por simple curiosidad en aplicar una combinación de tecnologías.

Basicamente lo que se me imagine fue lo siguiente:

1.- Realizar un scraping de alguna pagina.
2.- El resultado del scraping escribirlo en un archivo.
3.- Ejecutarlo de forma paralela.
4.- Se encuentre en crontab.


Para cada uno de los puntos anteriores utilice la siguiente tecnología:

1.- Casperjs.
3.- GNU Parallel
4.- Crontab.


Aqui esta el ejemplo para que vean como utilizar.



https://github.com/xola139/CasperjsParallel

No hay comentarios.:

Publicar un comentario