一、服务器监控。一般的服务器监控都会有日志，这种日志可以记录系统的运行状态，而爬虫监控则是一种外部监控，如访问某个关键页面来判断当前服务器的运行状态。这种手段一般用于无法直接监控或者临时监控的服务器。
二、搜索引擎。爬虫用于搜索引擎是一个普遍的爬虫应用，搜索引擎实际上就是采集网站的概要数据并按照各种条件进行查询的算法。这种数据采集需要根据某种通行的采集协议来进行，不能超越规定的采集边界。
三、数据采集。互联网上存在很多数据，有时需要某些专业数据进行定时采集以便分析，比如新闻、图片、视频、股票数据、天气数据和一些需要监控的数据等。
四、大数据分析。和上面数据采集差不多，只是大数据分析需要的数据采集规模更大、用途更广。大数据分析是将从网络上定向采集到的数据按照一定规则和流程进行处理，并运用处理结果进行分析预测。
四、系统对接。对于第三方封闭系统，对方由于某种原因不能提供数据接口，比如技术原因。这时要想展示该系统上的数据，可以通过定时定向采集的方式进行单向对接，这种对接一般会得到双方的认可，并需要特殊的权限验证。
以上是爬虫的基本用途，希望能有助于您对爬虫的认识。
