Windows和Linux下scrapy框架的安装

windows下安装:

1.安装Anaconda环境管理工具

也可以使用pip安装,值得注意的是如果你使用的是pip安装,你需要解决相应的包依赖(解决依赖一般会让你怀疑人生、怀疑scrapy,建议还是用Anaconda安装,少年!)

Anaconda 下载地址:https://www.anaconda.com/download/    里面有不同的平台,不同的版本,根据您的平台进行下载即可!这里的话建议大家下载Anaconda全包,而不是Miniconda,因为后者虽然小巧,但会出现一些问题,如果你怕填坑就请下载Anaconda,500M左右,这里再说一点,python是不用安装的,当然装了也没关系!

下载完成后可以开始傻瓜式安装,下一步下一步..... 下载路径这里注意不要带空格,

Advanced Options这一步两个都勾选,第一个是加入环境变量,下面是默认安装python3.6为默认的python解释器,然后下一步下一步...,最后安装完成.

2.安装scrapy

安装完成后开始菜单中会出现Anaconda Navigator,点击启动Anaconda,稍等片刻,正在启动

启动后点击左侧:Environments

右侧有个not installed选项,未安装的包 , 在右侧搜索框输入scrapy

选中搜索到的包,点击Apply安装, 出现安装依赖包,点击安装就可以了  

Linux下安装:

需要安装大量的依赖包(否则安装scrapy会报错),下面我把命令发出来,具体为什么安装这些,我就不解释了

傻瓜式命令输入:

yum -y install epel-release

yum install python-pip -y

pip install --upgrade pip

yum install gcc -y

yum install gcc libffi-devel python-devel openssl-devel -y

pip install scrapy

安装完成后打开命令行输入scrapy 如果不报错,安装就成功啦

到这里安装教程就完了,声明本篇博客借鉴了scrapy中文网的内容,大家可以百度搜索一下 scrapy中文网,教程很基础,也很有意思

原文地址:https://www.cnblogs.com/lyxdw/p/9530025.html