网络爬虫与网络反爬

　　接触过网络爬虫的用户，对于你来说，有什么是在爬虫过程中感到最艰难的呢?

　　对于python爬虫来说，最常遇见的难题就是来自网站的反爬策略。其实，python爬虫的固定套路也就那么多，各种网站的反爬策略也是针对这些固定的爬虫套路衍生出来的。

　　对付网络反爬最为关键的一个步骤，就是使用代理服务器。

　　代理IP服务器可以说是用户和所要访问网站中间的桥梁，它是用户与浏览网站的中间服务器。代理服务器根据用途，有不同的功能，例如换IP、提高安全性、保护隐私等等。

　　代理ip加上网站的反爬机制研究，能够让我们的爬虫工作更加便捷，不会那么容易被网站给封禁，ip代理的资源也足够使用。