用node写爬虫系列三:代理IP池

之前的文章中我们实现了两个简单的爬虫,这两个爬虫的爬取频率都不会很高,如果我们现在有一个爬虫,他对目标网站的爬取频率非常高的时候,就会面临一个问题,IP被封,如果一旦IP被封我们需要换一个新的I...

用node写爬虫系列二:纪念币预约提醒

在上一家公司的时候从同事那里了解到每年的某个时候可以到银行预约换取纪念币,以前一直以为纪念币是花钱买的,真的有些孤陋寡闻了。每年的某个时候国家会发行一篇纪念币,有生肖纪念币,还有一些重大事件的纪...

用node写爬虫系列一:小说下载器

在这个信息泛滥的互联网时代里,网络各处都遍布着爬虫的痕迹,大到搜索引擎比如百度蜘蛛,小到一些小的网站比如小新闻站,都有爬虫在背后的默默努力,从本节开始我们将通过一系列的爬虫例子带你用node来写...