Spidex - 重构的爬虫模块(nodegrassex)
首先声明,这个爬虫模块功能并不强大,只是封装了最基础的功能,本来都写好一半的上下文(即cookie相关)的代码了,后来想想这不是我需要的爬虫模块,又删掉了。
功能非常简洁,使用非常简单,没有很多的配置啊各类东西,只需传参数就好了,适合小工程,代码量不多的,不需要强大的爬虫功能的。
原来的 nodegrassex
是我从 nodegrass
给fork过来的。不过貌似年久失修,然后以及自己手贱,所以又重新写了一遍,正式更名为 spidex
。
git的地址为:https://github.com/XadillaX/spidex
以及安装命令是:
$ npm install spidex