搜索引擎禁止的方式优化网站(一下第一种、robots.txt方法默认的遵守robots协议)

　　搜索引擎禁止的方式优化网站(一下第一种、robots.txt方法默认的遵守robots协议)

　　（转载：）如何阻止搜索引擎收录爬取

　　一些网站站长希望自己的一些网页不会被搜索引擎抓取，但是不知道如何实现。现在，我将向您介绍

　　一、robots.txt方法

　　搜索引擎默认遵循 robots.txt 协议。创建 robots.txt 文本文件并将其放在 网站 根目录中。编辑代码如下：

　　用户代理：*

　　不允许：

　　使用代码，您可以告诉搜索引擎不要抓取 收录this网站。

　　二、网页代码

　　在网站首页代码之间，添加一个代码，这个标签防止搜索引擎抓取网站并显示网页快照。

　　如何阻止百度搜索引擎收录抓取网页

　　1、编辑 robots.txt 文件并将标签设计为：

　　用户代理：百度蜘蛛

　　不允许：/

　　2、在网站首页代码之间添加，防止百度搜索引擎抓取网站并显示网页截图。

　　3、邮箱联系百度管理： ，发邮件到网站的联系邮箱，如实说明删除网页截图。经百度验证，网页将停止被收录抓取。

　　4、登录百度自己的“百度快照”帖和“百度投诉”帖，发帖说明删除页面的原因收录网站快照，当百度管理人员，看到会处理。

　　如何阻止 Google 搜索引擎 收录 抓取网页

　　1、编辑 robots.txt 文件并将标签设计为：

　　用户代理：googlebot

　　不允许：/

　　2、在网站首页代码之间添加，防止百度搜索引擎抓取网站并显示网页截图。

　　经过以上操作，这样你的网站就不会被搜索引擎搜索到收录了。（转载：）