百度官方seo搜索引擎优化指南(《搜索引擎优化指南》禁止搜索引擎搜索引擎抓取页面抓取抓取本页面)
优采云 发布时间: 2021-09-02 16:03百度官方seo搜索引擎优化指南(《搜索引擎优化指南》禁止搜索引擎搜索引擎抓取页面抓取抓取本页面)
百度在2011年发布的《搜索引擎优化指南》中明确表示支持nofollow和noarchive元标签。
百度表示支持<a rel="nofollow" href="url">123和nofollow两种类型。具有 nofollow 属性的 URL 将不会传输其权重值。
如果您不希望搜索引擎跟踪此页面上的链接并且不传递链接的权重,请放置此元标记:
将上面这段代码放入网页的一部分,您可以限制所有搜索引擎创建您网页的快照。如果我们只需要限制一个搜索引擎来创建快照,我们可以这样写
需要注意的是,这样的标记只会禁止搜索引擎创建您网站的快照。如果您想禁止搜索引擎索引您的页面,请参考以下方法。
第二种情况:禁止搜索引擎抓取该页面。
在SEO中,常用于禁止搜索引擎抓取此页面或允许搜索引擎抓取此页面。所以我们需要讨论这部分的关键点。
为了防止搜索引擎抓取这个页面,我们一般的做法是在页面的meta标签中添加如下代码:
这里,META NAME="ROBOTS" 泛指所有搜索引擎。这里我们也可以指代某个特定的搜索引擎,比如 META NAME="Googlebot", META NAME="Baiduspide" 等
内容部分有四个命令:index、noindex、follow和nofollow。命令以英文“,”分隔。
INDEX 命令:告诉搜索引擎抓取这个页面
FOLLOW命令:告诉搜索引擎找到这个页面的链接,然后继续访问获取。
NOINDEX 命令:告诉搜索引擎不要抓取这个页面
NOFOLLOW 命令:告诉搜索引擎不允许从此页面找到链接并拒绝其继续访问。
根据上面的命令,我们有以下四种组合
:这个页面可以被抓取,其他链接可以沿着这个页面编入索引。
:不允许抓取此页面,但您可以抓取此页面上的其他链接并将其编入索引。
:您可以抓取此页面,但不允许抓取此页面上的其他链接并将其编入索引。
:您不得抓取此页面,也不得抓取此页面上的其他链接并将其编入索引。
这里需要注意的是,两个对立的反义词不能写在一起,例如
或者直接同时写两个句子
这里有一个简单的写法,如果是
形式
,可以写成:
如果是
形式
,可以写成:
当然,我们也可以将禁止创建快照和搜索引擎的命令写入命令元标记中。从上面文章我们知道禁止创建网页快照的命令是noarchive,那么我们可以写成如下形式:
如果不允许为单个搜索引擎创建快照,比如百度,我们可以这样写:
如果meta标签中没有关于spider的命令,则默认命令如下
因此,如果我们对这部分没有把握,可以直接写上面那行命令,或者留空。
在SEO中,对蜘蛛的控制是内容中非常重要的一部分,希望各位同学能准确把握这部分内容。