网络爬虫主要就是用于采集数据信息，来进行大数据分析，所以对于从事大数据的工作者是再熟悉不过了。那么网络爬虫为什么要使用代理IP才能顺利的完成抓取工作。其主要原因就是突破IP限制的反爬虫机制。

代理IP分为很多种，如高匿，普通，透明，还有长效，动态等之分，那么爬虫使用的代理IP为什么会选择高匿的代理IP来使用？因为高匿可以完全掩盖自己的真实IP，目标服务器无法识别出是真实客户真实IP还是代理IP。在无法辨别的情况下，爬虫才能顺利的采集到自己需要的共开收据。

如果使用普通的代理IP，目标服务器是知道你使用的是代理IP。而透明代理IP不仅知道是代理IP而且还是会知道本地IP地址。而长效的IP是IP地址一直不变的，这种IP多使用几次就会被限制。

所以高匿动态代理IP是网络爬虫最好的选择，也是完全符合爬虫使用的条件，但建议大家在使用动态IP时，切勿太高频繁的访问，这样也是很容易被限制，不能等到把代理IP用到被限制后才更换，虽然是动态代理IP，也要合理使用才能发挥出它的最大作用。

推荐阅读上一篇【独享IP与共享IP有什么区别？】