搜索引擎禁止的方式优化网站(一下怎么样禁止搜索引擎收录网站内容的操作方法有哪些?)
优采云 发布时间: 2022-02-27 01:05搜索引擎禁止的方式优化网站(一下怎么样禁止搜索引擎收录网站内容的操作方法有哪些?)
很多网站出于隐私原因不希望百度保留快照,网上也有关于如何禁止百度保留快照的讨论。那么,如何阻止百度保留快照呢?
搜索引擎蜘蛛不断在互联网上爬行。如果我们网站不采取行动禁止搜索引擎收录,我们很容易成为搜索引擎收录的目标。那么我们来介绍一下如何将收录网站的内容从搜索引擎中屏蔽掉。
一、禁用搜索引擎蜘蛛收录网站的全部内容
1.创建一个名为“robots”的新文本文件。robots 文件是搜索引擎和 网站 之间的协议。
2.设置搜索引擎与网站之间的协议,User-agent:*表示适用于所有搜索引擎协议;Disallow:/ 表示禁止爬取收录的整个站点。
二、如果只禁止某个搜索引擎爬取收录网站的某个目录,比如要禁止百度爬取收录金知目录,如图所示设置。
保存文件后,将文件上传到服务器根目录,即表示搜索引擎与网站的协议生效,可以禁止搜索引擎抓取收录@的内容>网站。
三、禁用搜索引擎蜘蛛收录指定网页内容
网页首页代码之间,添加代码,该标签防止搜索引擎抓取网站并显示网页快照。
有时我写机器人的时候,我发现我仍然可以搜索被禁止的内容。Noarchive 禁止搜索引擎创建网页快照,但这并不意味着您不索引您的网页。也就是说,这个noarchive不能禁止搜索导致你的内容被爬取。禁止爬取,建议使用
要限制所有搜索引擎构建您的网页,需要了解爬取页面中与搜索结果相关的命令:
index 命令:告诉搜索引擎抓取这个页面
follow command:告诉搜索引擎从这个页面找到链接,然后继续访问和爬取。
noindex 命令:告诉搜索引擎不要抓取这个页面
nofollow 命令:告诉搜索引擎不允许从此页面找到链接并拒绝它们进一步访问。
noarchive 命令:告诉搜索引擎禁止搜索引擎创建网页快照
禁止搜索引擎抓取收录也意味着很难从各大搜索引擎获取访问者,但如果真的是个人使用,又不想被别人看到,还是可以的。
上一篇:rel=nofollow 是什么意思?它在建立公司 网站 中扮演什么角色?
下一篇:网站流量来源研究:访客如何找到你网站?