胡思乱想后的爬虫,for black friday!
发布于 7 年前 作者 oyosc 4207 次浏览 来自 分享

所用技术:node+jquery+mysql+sequelize+bootstrap ##基本功能:

  1. 获取文章信息,如数据库没有会爬取数据再存到数据库中
  2. 实现邮箱推送,如有数据库记录推送,没有会定时查询数据库,有再进行推送
  3. 实现自动爬取功能,目前设置为北京时间8点整

github地址: 传送门 线上地址: 传送门

个人总结:为了黑色星期五自己玩随便写的,前端可以忽略不计,个人前端这块发现差的可以,另外没有好的全局观想到什么就写什么,这样太累了,到后面改的想吐…,其他的等以后有时间再改进吧,邮箱推送的话想玩的可以自己配置下,自己的就算了,别被封了…

最后一句:以后再也不敢随随便便就写了,这样心好痛!

14 回复

链接地址贴反了

@DevinXian 哈哈,改回来了,现在脑子是晕的,抱歉!

选了“运动户外”,再点击“开始获取”——毫无反应

@winglight 额,在DigitalOcean搞得一个国外服务器,估计是ping不通了,话说这个服务商没以前好了,今天抽时间换个吧!

@oyosc 默认的分类是可以打开的,应该是bug了

@winglight 不是BUG,是我数据库填充的时候搞错了…

@oyosc 别怪我较真:数据bug也是bug。。。

@winglight 好吧,你赢了…

有没有人在看这个爬虫代码啊?有些看不懂,能一起讨论一下吗?

@oyosc 运动户外 获取之后又自动跳转到了 电脑数码,不确定这是不是个BUG

@nevergiveupc 这个不是BUG呢,是我给强制刷新了

@nevergiveupc 为了便于操作,已经修改了下呢!

另外有没有想加进来的小伙伴呀,前端后端都可以,个人感觉这个可以更强大,不过最近没那么多时间了…

回到顶部