seo优化搜索引擎工作原理( 掌握搜索引擎工作原理的相关内容是否存在对用户不友好的设置)

　　seo优化搜索引擎工作原理(

掌握搜索引擎工作原理的相关内容是否存在对用户不友好的设置)

　　搜索引擎的工作原理

　　如果您只熟悉搜索引擎，但不知道它们是如何工作的，那么您就不会真正了解搜索引擎。掌握搜索引擎工作原理相关内容的重要性不亚于上述问题。

　　如下图所示，搜索引擎远非如此简单。每一个搜索结果，从网页生成到被搜索引擎展示给计算机用户，都需要经过爬行和索引、搜索和排名、评估网页内容三个过程。下面分别介绍这些过程。

　　爬取和索引

　　搜索引擎的抓取和索引就像我们选择食物一样。比如想吃海鲜，就需要有抓到的海鲜供食用，可以理解为爬行。其次，每个人都会选择不同的海鲜，这需要用户自己选择。为了方便选择，提取了一些关键词，即索引。同样，搜索引擎在完成一系列爬取和索引任务的过程中也需要完成类似的任务。然而，他们爬行的执行者是一个叫做“蜘蛛”的程序。别上当了，这只“蜘蛛”不是另一只蜘蛛。下面介绍搜索引擎蜘蛛及其相关内容。

　　什么是搜索引擎蜘蛛

　　关于搜索引擎蜘蛛，我们需要通过几个概念来理解。

　　首先，搜索引擎蜘蛛可以归类为一种程序，它是搜索引擎的自动应用程序。程序的形式是模仿蜘蛛织网后的爬行和遍历爬行而开发的。其次，通过搜索引擎系统的计算，确定应该抓取哪个网站，以及抓取的内容和频率。搜索引擎的计算过程会参考某个网站的历史表现，比如内容是否足够高，是否有对用户不友好的设置（例如，使用“欺骗”的方法来将用户转移到其他网页），是否有过度的搜索引擎优化行为等。爬行爬行是搜索引擎工作的第一步，

　　接下来，了解爬行和遍历爬行。爬行是搜索引擎的一种行为，遍历爬行是搜索引擎的一种爬行方式。通过遍历和爬行，实现了蜘蛛在网络上遍历的目的。

　　2.流程：抓取和索引

　　我们需要步行或乘车前往目的地。同理，蜘蛛从一个网站到另一个网站，正在爬行。如果你想知道蜘蛛，你可以通过代码找到它。方法是在日志文件中搜索“蜘蛛”这个词。如果找到以下内容，则表示有蜘蛛在爬取网站。

　　⑴谷歌蜘蛛：googlebot。⑵ 百度蜘蛛：baiduspider。⑶雅虎蜘蛛：啜饮。⑷soso蜘蛛：sosospider。⑸msn蜘蛛：msnbot。⑹有道蜘蛛：YodaoBot和OutfoxBot。⑺ 苏格蜘蛛：苏格蜘蛛。

　　让我们了解下面的索引。它和爬虫最大的区别就是索引不是一个具体的网址，而是页面中的很多网址。如果蜘蛛抓取的网页有重复的内容，则不会被重复索引。

　　3.如何爬取

　　蜘蛛先爬取内容，然后根据爬取的内容进行索引。这就是蜘蛛工作的意义。网站 更新后，产生了新的内容。这时，搜索引擎蜘蛛会通过一个链接到互联网上的页面进行访问和抓取。如果没有设置外部链接指向网站中的新内容，蜘蛛将不会被抓取。因此，及时更新网站的内容，拥有更广泛的外链是非常重要的。将所有这些信息抓取到搜索引擎的服务器，然后构建一个索引库。例如，我们可以将搜索引擎蜘蛛视为用户。这个用户访问了我们的网站，然后把我们网站的内容保存在了他的电脑上！下图是蜘蛛爬行的流程图。

　　检索和排序

　　在这个检索排序阶段，需要完成过滤和索引的工作。具体内容包括以下几个方面。

　　1.过滤器

　　如果说蜘蛛爬行就是“用网捕鱼”，那么接下来我们要做的就是对抓到的东西进行分类，因为网里的鱼不一定都是可食用的鱼。废渣（如欺骗用户的网页、死链接、空白内容页等），这又是一个庞大的工程。其实对于搜索引擎来说，它的过滤工作就是对搜索引擎蜘蛛爬回来的网页进行处理。我们可以将其视为类似的“过滤网”。

　　2.创建索引

　　所谓索引，就是搜索引擎在标签标题、元描述、网页的外链和描述、爬取记录中添加标签的行为。在这个过程中，网页中的关键词信息也会被识别和存储。这样做的目的是匹配用户可能搜索的内容。

　　3. 输出结果

　　搜索引擎分析用户输入的关键词，参考得到的结果，在索引结果中找到用户需要的网页。那么，把用户需要的内容以某种方式展示出来，就是花那么多时间的搜索引擎最终的目的。下图所示内容是百度搜索引擎搜索“计算机”一词后给出的结果。

　　评估网页内容

　　一个放在互联网上的网站需要有好的网页质量才能被更多的用户浏览。什么样的网页被搜索引擎认为是好的，被用户认为是好的？搜索引擎和用户有自己的评估网页的标准。下面分别介绍。

　　1.搜索引擎评估网页内容

　　搜索引擎对网页的内容赋予不同的权重。但是，如果要获得高权重，内容的质量必须经得起搜索引擎在抓取过程中的分析，最终由搜索引擎决定是否给予页面高权重。分析页面的内容，搜索引擎会考虑以下几个方面。

　　⑴ 页面内容与查询的语义关系是否匹配

　　用户在进行查询时会输入关键词，搜索引擎会通过输入的内容来判断该内容是否能出现在用户的查询结果中。搜索引擎通过分析页面中的词和词组来掌握页面的内容，并建立它们之间的关系，从而掌握页面内容是否与用户的查询相关。

　　⑵通过内容价值判断

　　搜索引擎用来抓取页面的蜘蛛会忽略代码中的很多内容，但蜘蛛最感兴趣的是代码中的文本内容。因此，页面的文本部分更容易取悦搜索引擎。下图显示了网页的源代码。与其他代码相比，蜘蛛对框架选择的文本更感兴趣。

　　2.用户评价网页内容

　　用户将根据搜索结果是否有助于找到他们想要的信息来评估网页的内容。以下部分总结了用户的评价标准。

　　⑴ 相关性

　　相关性是指网页的内容与用户的搜索相匹配。例如，用户想知道“阈值”这个词如何发音，搜索引擎会通过搜索给出搜索结果。如左下图和右下图，都是用户可以得到的结果，但是很明显右下图的相关性没有左下图高。

　　⑵ 有效性

　　有效性意味着内容应该有效地帮助用户。例如，通过搜索软件，可以下载和安装该软件。Internet 上的用户经常使用此任务。但是，在搜索过程中，是否可以找到可供下载的安全软件资源？用户可能经常会遇到点击进入网站，然后被要求注册才能进行操作的事情。

　　或者，用户想下载软件但需要付费。这些都有权限限制，需要检查资源是否能有效的达到下载的结果，但不能真正满足用户的需求。

　　⑶综合

　　全面性是指内容应尽可能全面。例如，当用户搜索某个新闻事件时，单个页面往往无法满足用户的需求，因为该新闻事件无法全面发布。这时候如果采用话题的形式，可以提高页面的质量，让内容更加丰富。

　　⑷及时性

　　及时性意味着网页的内容应该是最新的和最快的。例如，如果用户搜索“招聘”信息，然后用户得到的是一个月前或一年前发布的信息，或者已经过了招聘期的信息，这样的内容无异于无用信息。因此，内容的及时性非常重要。

　　⑸权限

　　权威是指网页内容由相关专家或网站发布，可以让用户感觉不一样。例如，这也是一个新闻事件。在新浪网等大型网站上发布新闻稿，在个人博客上发布，前者更具权威性。

　　⑹方便

　　方便意味着查看内容所花费的时间和成本越少，用户浏览网页内容就越方便。例如，对于相同的内容，一个网页可以被用户在第一屏浏览，另一个需要用户点击或在其他位置查看。用户肯定会选择可以直接查看的。