scrapy.Request 和response

1.request

Request是一个类

get请求

1          scrapy.Request(url=url,callback=self.parse_item,meta={'item':item},headers=header,dont_filter=True)

url:要求的u地址

callback:响应成功后的回掉函数

meta:参数传递 接收语法: data = mate['item']

headers:user_agent,定制头信息,一般不用

2.response

是一个对象 函数的第二个参数

response.text #字符串格式的文本内容

response.body #二进制格式的文本

response.url # 当前相应的url

response.status # 状态码

response.xpath() # 使用xpth规则来筛选类容

response.css() # 使用css规则来筛选类容

原文地址:https://www.cnblogs.com/cheflone/p/13677671.html