爬虫和反爬虫一直相爱相杀着：没有爬虫，反爬虫毫无存在的意义；有了反爬虫，爬虫的日子也别想好过。爬虫每天都在想怎么甩了反爬虫，反爬虫则是每天都在想怎么黏住爬虫，它们不断地在对抗中，不断地在提升自己，谁落后谁就要输。

爬虫在此期间为了甩开反爬虫自创了一招技能——伪装术，这技能又分为三招，分别是：伪装UA、伪装IP和伪装真实用户。下面我们来将技能进行分解，希望对新手朋友们有所帮助。

一、伪装UA。UA全称是User-Agent，叫做用户代理，不同的浏览器UA各有不同。反爬虫会根据UA来判断某个IP是否爬虫，所以需要进行伪装。网上有很多UA，搜集起来写在自己的配置里，在添加UA的时候随机选一个，这样毫无规律地设置UA，会让反爬虫傻眼；

二、伪装IP。很多时候反爬虫都是根据单IP的行为来判断是否爬虫，比如某IP访问频率太快，访问次数太多了……反爬虫就会限制IP再次访问。解决方法也很简单，找代理IP服务商购买高效稳定的代理IP，比如开心代理的动态高质量代理；

三、伪装真实用户。这个伪装技术就比较厉害了，反爬虫不可能杀死真实用户，不然网站就没什么意义了。那么如何伪装真实用户呢，也很简单，尽量模拟真实用户的行为，比如访问次数、访问频率、访问停顿和无规律浏览等等。但这样一来，效率就大大降低了。怎么办呢？还需要代理IP的配合，多线程&分布式爬虫，这样就能将效率提高而又不会被反爬虫发现了。

爬虫学会了这三招伪装术，甩开反爬虫的几率就加大了许多，当然，反爬虫也不是吃素的，也会对爬虫技术进行反复研究，创出其他招式来抵抗爬虫。所谓道高一尺魔高一丈，有时也会魔高一尺道高一丈，正所谓，胜败乃兵家常事，想要打倒对方，就必须时时提高自己，方为上策。