seo经典之作-2011最新搜索引擎优化实战(robots.txt增加sitemap的指向效果非常明显的格式以及参数设置办法)

　　seo经典之作-2011最新搜索引擎优化实战(robots.txt增加sitemap的指向效果非常明显的格式以及参数设置办法)

　　长期以来，大家一直在寻找各种方式向搜索引擎提供他们网站的内容，包括站点地图，甚至很多文章表示在robots.txt中添加站点地图效果非常明显.

　　真的有那么神奇吗？其实并不是！

　　由于工作原因，笔者有幸接触到了一场实战，三个不同规模的站点同时在robots.txt中添加了站点地图链接点。

　　网站 有具体的站点地图格式和参数设置方法。

　　根据不同的场地规模，我们选择了不同的方法；

　　添加的格式如下：

　　站点 1 规模较大，使用站点地图索引文件，其中收录其他站点地图文件。

　　将站点地图添加到 robots.txt 的最后一行：

　　sitemap.xml 索引文件的内容格式如下：

　　2011-05-01T18:23:17+00:00

　　2011-05-01

　　Site 2 和 Site 3 规模都比较小，用来直接指向具体的sitemap.xml

　　将站点地图添加到 robots.txt 的最后一行：

　　具体格式如下：

　　2011-05-01

　　每月

　　0.8

　　增加三天后，出现了变化，情况并没有想象中的那么好。具体表现如下：

　　1、百度：3个站点的收录速度变慢，尤其是站点1，从每天收录 2000多页变成每天只有收录10页。或者干脆不是收录，分析日志发现百度的蜘蛛来了，但是收录的内容很少，或者干脆逗留几分钟就走，站点2和站点3都是新的day收录数量变成了0，之前基本每天10页左右。

　　2、google：综合来看，Google 的效果是最好的。站点1的收录迅速崛起，很多以前没有收录的页面也开始收录。站点2和站点3的收录变化不大，排名有所上升。不知道是不是巧合。

　　3、soso：所有站点的收录已经开始减少，并且收录基本上没有新增页面，尽管站点1的每日更新量在2000左右。

　　4、搜狗：基本和百度差不多。

　　5：bing：收录有小幅增加，但不是很明显。

　　如此恶劣的后果，我们团队的所有成员都不想看到，所以我们果断地删除了所有站点地图点；

　　3天后，百度收录开始正常，谷歌变化不大，其他搜索引擎的收录基本恢复正常。

　　由此可以推断，各个搜索引擎对站点地图的理解和接受程度不同，我们无法讨论其中的技术问题，但实践证明，如果您的站点结构合理，收录也是正常和完全没有必要做任何站点地图。笔者个人认为sitemap更适合小规模站点，是站点结构不合理的小规模站点。如果你的网站结构合理，搜索引擎可以自己做收录。

　　还有一个更重要的一点是，如果你已经制作了站点地图，最好随时保持更新，最好是自动更新程序。

　　以上只是笔者个人的一些实践经验，并不能保证实验结果一定正确，并无指导意义。他们只是在和广大朋友讨论交流。

　　本文为第一单证交易平台：网络转载需注明出处！