scrapy学习

一、命令:

  1、创建项目:

    scrapy startproject projectname

  2、创建一个爬虫:scrapy genspider spidername

    

二、创建item:是保存爬取数据的容器,使用方法和字典类似。

  

   1、

 三、解析response:

  1、css选择器:

    与css的用法相同。

  2、xpath选择器:

    

     

 四、item pipelines:

  主要是用来进行

五、Downloader middleware用法:

  1、

六、spider middleware:

  1、

原文地址:https://www.cnblogs.com/monty12/p/10051142.html