用来爬虫的方法步骤

　　网络大数据时代，我们对于数据的掌握与使用是能够对工作起到帮助的。

　　网络时代的信息资源非常多，这些资源可以互相交换使用，这是互联网时代所具备的优势。但是随着数据量的增长，网站上的一些数据是需要我们利用爬虫抓取下来。

　　通常我们会使用以下两个方式来完成爬虫：

　　1.降低对目标网站爬取数据的速度，减小爬取数据对于目标网站造成的压力，但会减少单位时间类的抓取量。

　　2.使用服务器代理IP，使用服务器代理IP之后可以让代理ip伪装成真实ip去获取数据。

　　代理ip池能够让爬虫进展顺利，遇到ip限制问题，可以立马得到解决。