在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫：
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)
scrapy中主动触发关闭爬虫的方法
原文：https://www.cnblogs.com/du-jun/p/11447327.html
