seo网站日志分析工具(悟道SEO分三个步骤来了解和分析网站日志(组图))
优采云 发布时间: 2022-02-03 20:03seo网站日志分析工具(悟道SEO分三个步骤来了解和分析网站日志(组图))
网站日志也叫IIS日志。该日志记录了爬到我们身边的搜索引擎蜘蛛网站。根据日志,我们可以判断出搜索引擎蜘蛛每天都来找我们网站的次数、时间、爬取的页面以及返回的HTTP状态码。以下三个步骤来了解和分析网站日志。
一、各大搜索引擎的蜘蛛名字:
百度蜘蛛名称(Baiduspider)
谷歌(Google)爬虫名称(Googlebot)
雅虎啜饮
Yodao 蜘蛛名称 (YodaoBot)
搜狗蜘蛛名(搜狗蜘蛛)
MSN 的蜘蛛名称:msnbot
二、IIS日志手动分析:
案例日志:61.135.168.22 – – [11/Jan/2009:04:02:45 +0800] “GET /thread-7303-1 -1.html HTTP/1.1” 200 8450 “-” “Baiduspider(+)”
分析:
1、61.135.168.22是访问IP为this的服务器网站;
2、11/Jan/2009:04:02:45 表示蜘蛛爬行时间;
3、GET /thread-7303-1-1.html HTTP,表示蜘蛛抓取该页面;
4、200状态码表示蜘蛛爬取页面成功; 404表示蜘蛛爬取页面失败;
5、8450表示这次抓取了8450字节;
6、Baiduspider(+)表示百度蜘蛛的名称。
三、光年测井分析工具(光年测井分析工具下载使用教程)
这个工具非常好用,比人工省时省力。五道SEO强烈推荐大家使用这个工具。
网站的日志,我们每天都要看,才能了解蜘蛛来找我们网站爬取页面的情况。那些页面爬不上来,为什么爬不上去呢?这些都可以通过网站日志进行分析,找出原因,解决问题。