Python爬虫的出现给很多网络工作者爬取信息提供很大的便利，不仅省时省力还大大提高了工作效率。

Python爬虫在网络采集信息的时候，常常会出现IP无缘无故被禁的情况，爬取信息的工作无法接着进行，工作停滞不前。也有人表示都不知道发生了上面自己的IP就被禁了，简直令人摸不着头脑。

先和大家讲讲爬虫的工作原理。网络爬虫也叫网络机器人，是一种用来自动浏览万维网的程序或者脚本。爬虫可以验证超链接和HTML代码，用于网络抓取。网络搜索引擎等站点通过爬虫软件更新自身的网站内容或其对其他网站的索引。他能够实现快捷采集信息、整理任务，起到节省时间的作用。但是爬虫访问网站的过程会消耗目标系统资源，因此在访问大量页面时，爬虫需要考虑到规划、负载等问题。爬虫要是超过了网站所限制的访问次数，造成了网站的负荷，网站就会启动反爬虫机制防止爬虫接着毫无顾忌的爬取信心。

当爬虫被禁的时候，先要找出被禁的原因，才能对症下药，预防重蹈覆辙。下面简要说说几种爬虫被禁的原因。当网页出现空白，缺少信息的情况，有很大可能网站创建页面的JavaScript出现问题。当出现登录空白，无法保持登录状态情况下，可能需要检查一下cookie。当页面无法打开或者访问错误，就有可能使IP地址遭到网站封禁。

如果使IP被封禁，可以用代理IP解决这个问题。以开心代理IP为例。开心代理IP拥有海量资源，不用担心IP不够用，IP资源均是从机房拨出质量安全有保证，还提供私人定制，省时又省力，详情可以咨询客服。

推荐阅读上一篇【代理IP哪里获取】