pycharm下运行和调试scrapy项目

1. 新建项目

默认在本地已经新建了一个scrapy爬虫项目

2. 打开项目

点击open à 选择刚刚那个本地的scrapy项目meijutt100

3. 项目结构

各个py文件的作用不作介绍,不懂的请看入门教程

4. 创建启动脚本

在第二个meijutt100和scrapy.cfg同级目录下,新建一个文件,如begin.py(名字随便)用于模拟命令行启动scrapy项目

5. 配置pycharm

点击Run --> Edit Configurations

点击 + 号,选择python

 继续配置

第一步:给自己的启动配置起个名字,

第二步:选择启动脚本,就是刚刚创建的begin.py,

第三步:选择默认的python运行环境,这里最好用系统自己装的,不要用pycharm自带的,不然会出现很多多余的文件夹

第四步:选择工作空间,一般默认为当前项目目录

6. 运行和调试

点击运行或者debug调试该项目,可以在代码中打断点调试。

初学srapy,有错误之处还望各位读者指出。附上项目源码:https://github.com/weiliangchun/scrapy-meiju100.git

原文地址:https://www.cnblogs.com/vevy/p/10004148.html