搜索引擎的整个工作过程视为三个部分：蜘蛛在互联网上爬行和抓取网页信息，并存入原始网页数据库对原始网页数据库中的信息进行提取和组织，并建立索引库根据用户输入的关键词，快速找到相关文档，并对找到的结果进行排序，并将查询结果返回给用户。
1、网页抓取
Spider每遇到一个新文档，都要搜索其页面的链接网页。搜索引擎蜘蛛访问web页面的过程类似普通用户使用浏览器访问其页面，即B/S模式。引擎蜘蛛先向页面提出访问请求，服务器接受其访问请求并返回HTML代码后，把获取的HTML代码存入原始页面数据库。
2、预处理，建立索引
为了便于用户在数万亿级别以上的原始网页数据库中快速便捷地找到搜索结果，搜索引擎必须将spider抓取的原始web页面做预处理。网页预处理最主要过程是为网页建立全文索引，之后开始分析网页，最后建立倒排文件（也称反向索引）。
3、查询服务
在搜索引擎界面输入关键词，点击“搜索”按钮之后，搜索引擎程序开始对搜索词进行以下处理：分词处理、根据情况对整合搜索是否需要启动进行判断、找出错别字和拼写中出现的错误、把停止词去掉。接着搜索引擎程序便把包含搜索词的相关网页从索引数据库中找出，而且对网页进行排序，最后按照一定格式返回到“搜索”页面。
扩展资料
在信息抓取阶段搜索引擎掌握的信息往往是局部的，因而为搜索引擎设计一个好的抓取优先级策略并不是一件容易的事情，这里说的是一个深度抓取的优先策略。深度优先抓取它是以抓取到连接结构关系中的所有内容为主要目的的，具体实现方式是沿着树形的深度遍历树的节点，尽可能深的搜索树的分支，如果发现目标，则算法中止。
深度优先抓取过程中，抓取程序从起始页开始，一个链接一个链接跟踪下去，处理完这条线路最低端之后再转入下一个起始页，继续跟踪链接。
