seo网站日志分析工具( 网站日志是什么,引用百度百科的定义(图))
优采云 发布时间: 2022-02-07 06:02seo网站日志分析工具(
网站日志是什么,引用百度百科的定义(图))
网站什么是日志?seo日志分析的重点在哪里?
网站什么是日志,引用百度百科的定义“网站日志是以日志结尾的文件,记录了Web服务器接收和处理请求以及运行时错误等各种原创信息。准确的说,应该是服务器日志。” 通过这个定义可以知道网站日志记录了网站的所有操作信息,主要包括访问者信息(如访问者ip、什么浏览器、操作系统、访问时间等),爬虫对网站的爬取(爬了哪些目录,爬了哪些爬虫等),运行报错信息(主要是看一些http状态码)。
信息这么多,我们应该关注什么?
一、 蜘蛛爬行
1、哪些蜘蛛会来拜访
检查主流蜘蛛是否可以访问网站,如果没有,可能是被网站屏蔽了,可以查看网站的robots文件设置。
2、爬取了哪些目录
统计爬虫对网站目录的爬取情况,网站目录是否正常爬取,部分需要提升的目录是否被爬取。> 调整内链或增加外链,增加立柱重量,引导蜘蛛爬行。另外,蜘蛛可能会爬取一些无意义的目录,比如我们不想让搜索引擎知道的信息,此时可以将这些目录屏蔽掉。
3、爬取了哪些页面
计算蜘蛛对 网站 页面的爬取次数。经过一段时间的观察,你会发现一些蜘蛛经常爬的页面,分析一下蜘蛛为什么喜欢这些页面。这些页面和其他页面有什么区别?有没有其他页面可以借鉴。另外,通过分析页面爬取情况,也可以了解网站的一些问题,比如重复页面问题、url规范化问题等等。
4、蜘蛛访问次数、停留时间、抓取量
蜘蛛经常访问网站,表示喜欢网站,经常过来看看网站的内容有没有更新,这对网站来说是好事。如果每十天半月才来一次,那么网站的内容可能要更新的更频繁,并且应该增加更多的外部链接来引导蜘蛛访问网站。停留时间的长短可以反映蜘蛛对网站的喜好。需要注意的是,如果停留时间长,但是爬取量低,就会出现问题。可能是蜘蛛在抓取网站难度的内容,或者网站内容质量低。这三个指标需要一起看,以获得更有价值的信息。