【干货】了解搜索引擎如何抓取网页和如何索引网页

　　【干货】了解搜索引擎如何抓取网页和如何索引网页

　　1、了解搜索引擎如何抓取网页以及如何为网页建立索引

　　您需要了解某些搜索引擎的基本工作原理，搜索引擎之间的差异，搜索机器人（SE机器人或网络爬虫）如何工作，搜索引擎如何对搜索结果进行排序等等。

　　2、元标记优化

　　主要包括主题（标题），网站描述（描述）和关键词（关键字）。还有一些其他隐藏的文本，例如作者（作者），类别（目录），语言（编码语言）等等。

　　3、如何选择关键词并将关键词放置在网页上

　　您必须使用关键词进行搜索。 关键词分析和选择是SEO的最重要任务之一。首先，确定网站的主要关键词（通常大于5），然后针对这些关键词进行优化，包括关键词密度，相对性，突出性等。

　　4、了解主要的搜索引擎

　　尽管搜索引擎很多，但只有少数几个决定了网站的流量。例如，英语主要是谷歌，雅虎，必应等。中文是百度，搜狗，有岛等。不同的搜索引擎对页面进行爬网，索引和排序有不同的规则。还了解搜索门户和搜索引擎之间的关系。例如，AOL网络搜索使用Google的搜索技术，MSN使用Bing的技术。

　　5、主Internet目录

　　Open Directory本身不是搜索引擎，而是大型网站目录。它与搜索引擎之间的主要区别是网站内容的采集方式。该目录是手动编辑的，位于主页收录 网站的主页上；搜索引擎会自动采集，除了首页之外，它还会抓取大量内容页面。

　　6、每次点击付费搜索引擎

　　搜索引擎也需要生存。随着Internet商务的成熟，收费搜索引擎也变得越来越流行。最典型的是序曲和百度。当然，它们还包括Google的广告项目Google Adwords。越来越多的人使用搜索引擎单击广告来查找商家网站。在优化和排名方面也有丰富的知识。您必须学会使用最少的广告投资来获得最多的点击次数。

　　7、搜索引擎登录

　　完成网站后，请勿躺在那里等待客人从天上掉下来。让其他人找到您的最简单方法是将网站提交给搜索引擎。如果您是商业用户网站，主要的搜索引擎和目录将要求您付费才能获得收录（例如，雅虎为299美元），但好消息是（至少到目前为止）最大的搜索引擎，即Google ，目前是免费的，并且在搜索市场中占据60％以上的份额。

　　8、链接交换和链接流行度

　　网页的内容都以超文本的形式相互链接，网站之间也是如此。除了搜索引擎之外，人们每天还通过网站之间的不同链接进行冲浪（“冲浪”）。从其他网站到您的网站的链接越多，您获得的访问次数就越多。更重要的是，您的网站拥有的外部链接越多，搜索引擎对它的考虑就越重要，这将为您带来更高的排名。

　　9、合理使用标签