为什么现在的网络爬虫选择匿名程度好的代理ip很有必要?

　　当我们使用普匿代理或者透明代理访问网站时，会暴露给目标网站知道你在使用代理IP访问，那么相对应的就会受到限制.我们知道，当一个IP用来访问同一个网站达到一个阈值时，就会受到限制。

　　在这里，如果你还在使用普通代理和开放代理，趁早放弃吧，重购买高质量代理IP才是正确的选择，假如你的使用购买共享IP池，总是被反爬策略针对，那么就会明白独享IP的重要性了。

　　特别对于爬虫专业户，通常都会对ip代理的独立性有比较高的追求。