搜索引擎的工作过程大致可以分为三个阶段：

（1）爬行：搜索引擎蜘蛛通过跟踪链接来查找和访问页面，读取页面的HTML代码，并将其保存在数据库中。

（2）预处理：索引程序对捕获的页面数据进行文本提取、中文分词、索引、倒排索引等处理，调用排名程序。

（3）排名：用户输入查询词（关键字）后，排名程序调用索引数据，计算相关性，然后按一定格式生成搜索结果页面。

爬行是搜索引擎工作的首步，完成数据采集任务。搜索引擎用来抓取页面的程序叫做蜘蛛

一个合格的SEOER，为了让自己的页面更多的被收录，我们必须尽量吸引蜘蛛来抓取。

蜘蛛抓取页面有几个因素：

（1）网站和页面的权重。高质量、长时间的网站通常被认为是具有高权重、高爬行深度和更多包含页面的网站。

（2）页面的更新频率。每次蜘蛛爬行，它都会存储页面数据。如果第二次和第三次与初次相同，则表示没有更新。随着时间的推移，蜘蛛不需要经常抓取你的页面。如果内容经常更新，蜘蛛会频繁访问页面以获取新页面。

（3）导入链接，无论是内部链接还是外部链接，都要被蜘蛛抓取，必须有导入链接进入页面，否则蜘蛛就不会知道页面的存在。

（4）与主页的点击距离一般是网站上权重较高的主页，而且大部分外部链接都会指向主页，所以蜘蛛比较常访问的页面就是主页。与主页的单击距离越近，页面权重越高，被爬网的机会就越大。

坚持网站内容更新的频率，较好的是高质量的原创内容。

主动把我们的新页面提供给搜索引擎，让蜘蛛更快地找到它们，比如百度的链接提交、抓取诊断等。

要建立外部链接，可以与相关网站交换链接，也可以转到其他平台，发布指向自己页面、包含相关内容的高质量文章。

要制作网站地图，每个网站都应该有一个网站地图。网站的所有页面都在网站地图中，方便蜘蛛抓取。