说起网络爬虫，必然就会有反爬虫，反爬虫是大家做爬虫工作的时候需要解决的一个问题。

　　反爬里面最常见的一种手段就是，判断你的请求频率。如果你短时间内发送了大量的请求，甭管你是不是人，先封你账号或IP一段时间再说。所以，这就成了一个矛盾的地方：爬得太快会被封，爬得太慢又很耗时间。

　　这个时候就是需要使用代理IP来代替自身IP去重复访问操作，这样能提升抓取效率并且降低被封的风险。代理服务器(Proxy Server)是个人网络和Internet服务商之间的中间代理机构，它负责转发合法的网络信息，对转发进行控制和登记。

　　通过ip转换器，我们能够将受到限制的ip马上进行替换，这样网站就不会察觉到，可以继续用新的代理ip来抓取数据了。