scrapy(三)使用mongoDB

1.使用mongoDB必须已经安装mongoDB和pymongo

可以通过命令sudo pip install pymongo安装pymongo

2.settings.py

需要配置MongoDB的IP地址、端口号、数据记录名称,可以实现方便的更换MongoDB的数据库信息。引用pipelines.py从而使pipelines生效

 

3.pipelines.py

在pipelines中可以操作MongoDB的数据。操作的数据来自items。

 

4.运行测试,数据已经写到mongoDB

原文地址:https://www.cnblogs.com/corolcorona/p/6795143.html