当大家接触到一件新物品时，第一个念头一般是想知道它是做什么用的。同样地，对于搜索引擎也不例外。下面的内容告诉大家搜索引擎的作用。

搜索引擎的基本工作原理

搜索引擎的工作原理其实很简单，首先它被分为4个部分，如下图所示，第一部分是蜘蛛爬虫，第二部分是数据分析系统，第三部分是索引系统，第四部分是查询系统。总之，若希望通过搜索引擎为用户带来更好的体验，需要对网站进行严格的内容建设，使之更符合用户的浏览需求。

抓取

当要享受美味的海鲜大餐之前，需要有人去捕获各种各样的海鲜，然后才能根据自己想吃的品种进行有选择的食用。同样地，对于搜索引擎在完成这一系列工作过程的每一步骤中，也需要完成类似的工作。但是，它们这个抓取的执行者是一种被称为“蜘蛛”的程序。不过要注意此“蜘蛛”非彼蜘蛛，了解了这些之后，下面将介绍搜索引擎蜘蛛及其抓取的相关内容。

搜索引擎蜘蛛

关于搜索引擎蜘蛛，需要通过几个概念来了解它。

程序：首先，搜索引擎蜘蛛可以归类为程序的一种，程序的形式通过模仿蜘蛛织网后的爬行、遍历爬行而展开。总之，搜索引擎蜘蛛程序，其实就是搜索引擎的一个自动应用程序。

计算：其次，通过搜索引擎系统的计算来决定对哪些网站施行抓取，以及抓取的内容和频率值。搜索引擎的计算过程会参考用户的网站在历史中的表现，比如内容是否足够优质，是否存在对用户不友好的设置，是否存在过度的搜索引擎优化行为等等。爬行和抓取是搜索引擎工作的第一步，它完成真正意义上的数据收集任务。

如何进行抓取

网站更新后，产生了新的内容。这时，搜索引擎蜘蛛会通过互联网中某个指向该页面的链接进行访问和抓取，如果没有设置任何外部链接指向网站中的新增内容，它将不会给予抓取处理。因此，及时更新网站的内容和有较广泛的外部链接非常重要。把这些信息都抓取到搜索引擎的服务器上，然后建立索引库，举例说明，可以把搜索引擎蜘蛛当做一个用户，该用户来访问网站，再把网站内容保存到自己的电脑上。

过滤

如果说所谓的蜘蛛爬行是“撒网捕鱼”，那么接下来要做的就是，将捕上来的东西进行归类，因为在网里的不一定都是能吃的鱼，也有可能是废渣等(比如，一些明显的欺骗用户的网页、死链接、空白内容页面等)，这又是一项浩大的工程。其实，搜索引擎过滤工作，就是处理搜索引擎蜘蛛抓取回来的网页，此功能类似于“过滤网”。.

建立索引

所谓的建立索引，是搜索引擎对网页的tag title、meta descripiton、网页外链及描述、抓取记录等进行标记添加的行为。这其中，还将对网页中的关键词信息进行识别和储存，使之用来匹配用户可能会搜索的内容。

输出结果

搜索引擎通过对用户输入的关键词进行分析，参照得出的结果，找出用户需要的网页。然后，搜索引擎花大量的时间进行信息处理，把用户需要的内容，以一定的方式展示出来。如下图所示内容，就是用百度搜索引擎进行“网上购物”关键词的搜索之后，所给出的输出结果。