爬虫常见异常

常见异常解析与解决方案

异常类型 异常原因 解决方案
ConnectionResetError: [WinError 10054] 远程主机强迫关闭了一个现有的连接。  短时间内，请求次数过多，导致服务器拒绝访问  使用ip池，或者等会儿再试
页面获取的中文乱码 编码转换问题

方案一：获得网页数据之后，直接将响应数据重新编码之后再取值，response_data.encoding='utf-8'

方案二：获取具体内容后，对具体内容进行重新编码，name=name.encode('iso-8859-1').decode('gbk')
     
     
报错即异常处理

相关

标签