网页爬虫文章链接 网络爬虫之scripy系列 【scrapy网络爬虫】之0 爬虫与反扒 【scrapy网络爬虫】之一 scrapy框架简介和基础应用 【scrapy网络爬虫】之二 持久化操作 【scrapy网络爬虫】之三 递归解析和post请求 【scrapy网络爬虫】之四 日志等级和请求传参 【scrapy网络爬虫】之五 CrawlSpider操作 【scrapy网络爬虫】之六 selenium在scrapy中的应用 【scrapy网络爬虫】之七 UA池和代理池在scrapy中的应用 【scrapy网络爬虫】之八 分布式操作 《scrapy深度爬虫》 主要说明爬虫类继承Spider还是CrawlSpider