request 和 superagent 模块 都可以拿来做爬虫，怎么选择呢

@yongjun925 哦哦，怎么区分呢

superagent可以使用superagent.agent();自动处理cookie，包装的cookiejar。在需要登录后爬取数据的，很有用

我用的 request-promise 还不错，加上 cheerio

然后用的是 egg.js 的 定时任务定时爬取。

@cnlile @lzq920 e，这不是nodejs 社区吗

@lzq920 e，这不是nodejs 社区吗

爬虫用Scrapy做过，觉得还可以的，推荐一下。。。

做爬虫首选py