Scrapy 框架

找不到的包,在这个网站找:http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml

引言: Scrapy是爬虫界大名鼎鼎的存在,在Linux下安装非常顺利,但是在Windows下确实非常多的问题发生,这里记录存在的各类问题以及如何解决。

1.   安装Scrapy失败

     直接在windows下安装scrapy大概率会是失败的,各类不同的原因,主要是各类依赖包未必全部安装,故依据具体的问题而定。

     >> pip install scrapy

2.   安装visual c++ build tools

    这个工具是由微软提供,主要是用于编译相关的源代码而成的:

    下载地址: http://www.microsoft.com/zh-CN/download/details.aspx?id=48159

在Ubuntu下进行,Windows可酌情更改,理解意思

$ scrapy startproject ITcast

创建一个Scrapy项目

$ ls 查看目录

$ tree 查看树状关系

原文地址:https://www.cnblogs.com/xk-bench/p/7581174.html