大家对网络爬虫这个字眼是再非常熟悉不过了， 用来抓取采集信息数据，而网络爬虫需要代理ip的支持才能完成，如果单一使用一个ip很快就会被对方服务器所限制，所以爬虫是离不开代理ip。

   但代理ip有很多种，为什么爬虫要选择短效代理ip？

   代理ip有分长效和短效之分，也就是代理ip的有效时间的长短，所谓的长效代理ip时长都是在10分钟以上，而短效代理ip的有效时间都在3-6分钟之间，当然这个也可以根据自己的需求选择适合的有效时间。

   网络爬虫需要不断的访问目标服务器来抓取自己想要的数据信息，所以每个ip最多用几分钟，或者用来访问几次就不再使用了，如果单个ip访问过于频繁会被对方视为不正常访问（会被视为恶意攻击）。很快就会被限制访问或者禁用，所以爬虫需要代理ip的帮助，需要很多的ip资源来支撑它完成任务。

   爬虫不仅仅选择短效代理ip就大功告成，在选择代理ip时还需要注意更重要的几点；

  1）高质量优质代理ip：爬虫对于ip的质量要求非常严格，所以必须要选择高质量优质短效代理，必须具备，高匿，速度，稳定的条件。

  2）代理ip池大：我们都知道爬虫需要很多代理ip，所以代理ip池的ip越多越好。

  3）ip资源丰富：如果ip池种地区资源越多，ip的使用就更安全，被对方服务器怀疑的几率就越小。

推荐阅读上一篇【如何提高阅读量】