爬虫常见异常

常见异常解析与解决方案

异常类型 异常原因 解决方案
ConnectionResetError: [WinError 10054] 远程主机强迫关闭了一个现有的连接。  短时间内,请求次数过多,导致服务器拒绝访问  使用ip池,或者等会儿再试
页面获取的中文乱码 编码转换问题

方案一:获得网页数据之后,直接将响应数据重新编码之后再取值,response_data.encoding='utf-8'

方案二:获取具体内容后,对具体内容进行重新编码,name=name.encode('iso-8859-1').decode('gbk')

     
     
原文地址:https://www.cnblogs.com/shengjie1/p/12296551.html