做好搜索引擎优化的姿态——蜘蛛爬行的两种策略

　　做好搜索引擎优化的姿态——蜘蛛爬行的两种策略

　　俗话说，产品经理必懂天文地理，人与人和，阴阳，八卦，奇门，闪甲，谋略，必胜！今天小编就在这里和大家分享一下搜索引擎优化的姿势。

　　SEO，全称是search engine optimization，意思是搜索引擎优化。换句话说，当用户在搜索引擎（如百度搜索）中搜索与您的网站内容相关的关键词时，该技术将使您的网站排名更高。随着网络流量成本的不断增加，百度的竞购也越来越激烈。 SEO让你的网站持续带来精准流量，而且几乎完全免费。

　　所谓知己知彼，百战不败。做好搜索引擎优化工作，首先要了解搜索引擎的工作原理。

　　Fetching：搜索引擎工具获取内容的方法和原理。毕竟搜索引擎不生产内容，他们只是内容的载体。

　　预处理：搜索引擎抓取的内容太多，当然“脏”了，所以我们需要提前对内容进行处理。

　　排名：这么多内容，谁排在前，谁排在后？当然是一套规则。

　　因为搜索引擎可以说是互联网上几代人智慧的结晶，一时半会不会完成，所以今天只讲一小部分。

　　当然，互联网是一个非常大的网络，蜘蛛只爬取一小部分。这里简单介绍一下蜘蛛爬行的两种策略：广度优先遍历策略和深度优先遍历策略

　　顾名思义，先遍历*敏*感*词*页的所有第二页，然后遍历所有第三页，如下图

　　它首先遍历*敏*感*词*页第二页之后的所有分支。当蜘蛛爬到分支底部并且没有新的链接让蜘蛛继续爬行时，蜘蛛会回到*敏*感*词*页面，爬到另一个辅助页面下面的分支

　　在实际的蜘蛛爬取过程中，根据页面结构的不同，两种策略混合使用。

　　整个互联网的内容就像星辰大海。以目前的技术，蜘蛛不能也不需要抓取整个互联网的所有内容，搜索引擎也无法搜索蜘蛛没有抓取过的网页内容。不过，此时我们只需要了解蜘蛛的习性，就可以吸引蜘蛛抓取我们网站上收录的搜索引擎内容。那么，如何吸引蜘蛛呢？

　　俗话说，有人的地方就有河流和湖泊。互联网也是如此。一些老牌的网站如腾讯新闻、皇峰峰、网易等，由于建设时间长，在舞台上有一定的地位，所以蜘蛛总是先爬取这些网站的内容。

　　人们喜欢新鲜事物，蜘蛛也不例外。蜘蛛在抓取新内容时具有较高的优先级。如果你的网站继续有原创新内容，蜘蛛会很想访问你的网站。但是，如果蜘蛛每次都来你的网站，发现一些转载或复制的内容，他们会认为你的网站没有能力创造新的内容，我再也不会访问你的网站。 .

　　蜘蛛喜欢勤奋的网站管理员。如果你的网站不断更新，蜘蛛就能定时抓取你的网站。

　　如上所述，老的网站蜘蛛总是专注于爬行，而蜘蛛的爬行逻辑是沿着链接爬行，所以我们可以找到一些成熟的网站，请帮助他们自我介绍网站 'S链接，这样蜘蛛就可以沿着这个链接爬到我们的网站。