seo网站日志分析工具(分析网站日志分析应当包括以下维度(一)(组图))
优采云 发布时间: 2022-03-17 05:34seo网站日志分析工具(分析网站日志分析应当包括以下维度(一)(组图))
网站日志的分析对于网站体验的优化和蜘蛛的友好性具有重要意义,网站日志分析主要应该包括以下几个维度。
蜘蛛型
1、蜘蛛日志网站日志分析的一个重要部分就是分析蜘蛛日志。蜘蛛类型应包括当前主流蜘蛛分类、异常蜘蛛类型、蜘蛛总数、蜘蛛爬行频率、蜘蛛爬行频率的记录。
A.有用的蜘蛛如百度蜘蛛baiduspider、谷歌蜘蛛googlebot、360蜘蛛360蜘蛛、神马蜘蛛yisospider、必应蜘蛛bingbot、今日头条蜘蛛Bytespider。这些是有用的蜘蛛。
B.无用蜘蛛除了上面提到的有用蜘蛛外,还应该统计无用蜘蛛的种类,根据访问频率决定是否禁止。如 SemrushBot、AhrefsBot、blexbot、mj12bot,包括但不限于此处列出的蜘蛛类。
C. 其他所谓的其他蜘蛛是指上面未列出的蜘蛛类型,应归类为蜘蛛/机器人。如果此类蜘蛛访问量较大,也应予以检出并酌情添加到禁令中。
D.爬虫爬取频率和记录,即所有爬虫爬取记录和每个链接爬取次数一目了然。
日志分析法
1、蜘蛛日志分析
内容涵盖上述所有爬虫类型、爬取频率、爬取页面信息等。
2、IP 分析
分析日志,无法避免异常的ip分析。比如在一个站里,一般人可能读了三五页就走,但也有的人读了三十到五十,甚至三到五百页。这样的人有问题吗?
因此,我们有必要对每个ip的浏览频率进行分析总结,根据详细日志判断用户的行为是否合规。
3、经常访问页面分析
通过分析一些流量最高的页面,我们可以快速判断应该如何投放广告,如何维护和调整页面,让经常访问的页面获得更有针对性的流量。
4、404 页面摘要
分析网站日志必须分析404错误页面,并逆序汇总相关数据。如上图所示,这里的404错误大部分来自一些黑客。如果此类IP在国内IP段,可以考虑直接封禁。
而第6个404是网站失效的接口,死链接可以提交到百度站长平台。
当您拥有如此多的 网站 日志分析数据时,您一定已经知道下一步该做什么。
当然,靠人力来分析网站日志是很难的,遗漏和错误也难免。这时,我们可以借用工具。正如我们推荐的那样:
网站.log 日志在线分析
以上资料所附截图均为真实可靠,可惜此日志分析工具现阶段仅支持分析宝塔面板网站的日志。
当然,如果其他类型的日志分析的用户数较多,也可以联系在线客服,提交几条你的日志信息供参考,对应的日志分析类型稍后会补充。
网站建设不易,站长也不容易,尤其是2021年的今天,新站长要入手,比以前更难。所以要扎实分析日志,根据日志情况进行调整,比如优化404页面,比如防止恶意采集等等。
希望各位站长都能迎来属于自己的辉煌时刻。