####
###
原生的scrapy，今天启动了，关闭了，明天再启动，昨天爬取的url，会再次爬取，这不是我们想要的，
我们想要的是今天爬过的url，下一次就不再爬取了，这就是增量式爬虫，
scrapy框架-scrapy-redis的使用
原文：https://www.cnblogs.com/andy0816/p/15064053.html
