在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫：
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)
在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫：
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)