修改了USER_AGENT还是不能抓取到数据怎么办?

1.首先检查自己的程序有没有错误,确保USER_AGENT是相对应网站的,复制粘贴无误

2.检查自己pycharm中setting.py文件中的USER_AGENT有没有打开

 3.删除USER_AGENT前面的#即为打开

4.字体亮起即成功打开,现在运行scrapy crawl +文件名,就可以抓取了

希望能帮到大家,问你们要一个赞,你们会给吗,谢谢大家
版权声明:本文版权归作者(@攻城狮小关)和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。
大家写文都不容易,请尊重劳动成果~

交流加Q:1909561302

 CSDN地址https://blog.csdn.net/Mumaren6/

原文地址:https://www.cnblogs.com/guanguan-com/p/13544806.html