题主可能是想知道爬虫能干什么。这个问题应追溯到服务器监控爬虫程序、数据搜索、数据采集、大数据分析、系统对接等方面。

一、服务器监控。一般的服务器监控都会有日志爬虫程序，这种日志可以记录系统的运行状态，而爬虫监控则是一种外部监控，如访问某个关键页面来判断当前服务器的运行状态。这种手段一般用于无法直接监控或者临时监控的服务器。

二、搜索引擎。爬虫用于搜索引擎是一个普遍的爬虫应用爬虫程序，搜索引擎实际上就是采集网站的概要数据并按照各种条件进行查询的算法。这种数据采集需要根据某种通行的采集协议来进行，不能超越规定的采集边界。

三、数据采集。互联网上存在很多数据爬虫程序，有时需要某些专业数据进行定时采集以便分析，比如新闻、图片、视频、股票数据、天气数据和一些需要监控的数据等。

四、大数据分析爬虫程序。和上面数据采集差不多，只是大数据分析需要的数据采集规模更大、用途更广。大数据分析是将从网络上定向采集到的数据按照一定规则和流程进行处理，并运用处理结果进行分析预测。

四、系统对接。对于第三方封闭系统，对方由于某种原因不能提供数据接口，比如技术原因。这时要想展示该系统上的数据，可以通过定时定向采集的方式进行单向对接，这种对接一般会得到双方的认可，并需要特殊的权限验证。

以上是爬虫的基本用途，希望能有助于您对爬虫的认识。

Python是什么，什么是爬虫？具体该怎么学习？

Python是一种极少数能兼具简单与功能强大的编程语言，易于学习理解，入门容易，代码更接近于自然语言和平时的思维方式，据统计显示是世界上最受欢迎的语言之一。

爬虫就是利用爬虫技术去抓取各论坛、网站数据，将所需数据保存到数据库或是特定格式文件。

具体学习：

1）首先是学习Python基本常识学习，了解网络请求原理、网页结构。

2）视频学习或者找一本专业网络爬虫的书进行学习。所谓“前人栽树后人乘凉”，跟着大神的步伐进行实际操作，必定能事半功倍。

3）网站实际操作，在具备爬虫思想之后多找一些网站进行操作。

想学爬虫，具体要用到什么软件？如何操作？

这里有2种方法，一个是利用现有的爬虫软件，一个是利用编程语言，下面我简单介绍一下，主要内容如下：

爬虫软件这个就很多了，对于稍微简单的一些规整静态网页来说，使用Excel就可以进行爬取，相对复杂的一些网页，可以使用八爪鱼、火车头等专业爬虫软件来爬取，下面我以八爪鱼为例，简单介绍一下爬取网页过程，很简单：

1.首先，下载八爪鱼软件，这个直接到官网上下载就行，如下，直接点击下载：

2.下载完成后，打开软件，进入任务主页，这里选择“自定义采集”，点击“立即使用”，如下：

3.进入新建任务页面，然后输入需要爬取的网页地址，点击保存，如下，这里以大众点评上的评论数据为例：

4.点击“保存网址”后，就会自动打开页面，如下，这时你就可以根据自己需求直接选择需要爬取的网页内容，然后按照提示一步一步往下走就行：

5.最后启动本地采集，就会自动爬取刚才你选中的数据，如下，很快也很简单：

这里你可以导出为Excel文件，也可以导出到数据库中都行，如下：

编程语言这个也很多，大部分编程语言都可以，像Java，Python等都可以实现网页数据的爬取，如果你没有任何编程基础的话，可以学习一下Python，面向大众，简单易懂，至于爬虫库的话，也很多，像lxml，urllib，requests，bs4等，入门都很简单，这里以糗事百科的数据为例，结合Python爬虫实现一下：

1.首先，打开任意一个页面，爬取的网页数据如下，主要包括昵称、内容、好笑数和评论数4个字段：

2.接着打开网页源码，可以看到，爬取的内容都在网页源码中，数据不是动态加载的，相对爬取起来就容易很多，如下：

3.最后就是根据网页结构，编写相关代码了，这里主要使用的是requests BeautifulSoup组合，比较简单，其中requests用于请求页面，BeautifulSoup用于解析页面，主要代码如下：

点击运行程序，就会爬取到刚才的网页数据，如下：

4.这里熟悉后，为了提高开发的效率，避免重复造轮子，可以学习一下相关爬虫框架，如Python的Scrapy等，很不错，也比较受欢迎：

至此，我们就完成了网页数据的爬取。总的来说，两种方法都可以，如果你不想编程，或者没有任何的编程基础，可以考虑使用八爪鱼等专业爬虫软件，如果你有一定的编程基础，想挑战一下自己，可以使用相关编程语言来实现网页数据的爬取，网上也有相关教程和资料，感兴趣的话，可以搜一下，希望以上分享的内容能对你有所帮助吧，也欢迎大家评论、留言。