为什么站长待网站上线后,要经常分析网站日志中获取到答案?
优采云 发布时间: 2021-07-24 06:08为什么站长待网站上线后,要经常分析网站日志中获取到答案?
Q:网站上线后,为什么站长总是分析网站服务器上的网站日志,网站是否有蜘蛛爬行,网站是否正常,网站是否@是彻头彻尾的你能从网站日志中得到答案吗?
1、网站上线后,用于搜索引擎蜘蛛查看网站的爬取状态
网站上线后,向各大搜索引擎平台提交网站map后,发现网站日志中的搜索引擎蜘蛛数量增加,均返回200,说明该网页为被蜘蛛爬行。那时返回的是正常的网页,也就是这些网页会被搜索引擎抓取,正常的收录。
2、检查网站日志中的服务器状态是否正常
网站日志中每行末尾的字符是状态码。正常的服务器状态码应该是200或者301,但是如果有其他码,比如4xx网站打不开,5xx服务器问题,对于不同的web服务器的返回码可以在对应的错误网页中找到来解决问题。
3、网站收录异常,分析蜘蛛访问次数是否低
观察网站被搜索引擎蜘蛛抓取的次数,看看蜘蛛的访问次数是否低,导致网站收录不好。蜘蛛访问量低的原因可能有:网页无法正常访问、网站server不稳定、网站外链减、网站内容质量低、网站作弊违规被搜索处罚引擎等
4、检查是否有搜索引擎惩罚和监控蜘蛛爬行
在网站被搜索引擎惩罚之前,搜索引擎通常会发送特定IP的网站蜘蛛访问网站抓取爬取内容,进一步判断网站是否存在大量作弊非法操作内容,然后根据对于作弊、过度优化等行为,进行下一步分析操作,看看网站是否受到处罚,比如百度的123.125.68.* IP段蜘蛛爬行,可能会被处罚。大多数 IP 以 220 开头的蜘蛛表示正在抓取网页。
5、网站被K可以恢复,观察日志情况
网站该网站因违规操作被搜索引擎k屏蔽。及时处理后,网站能恢复正常吗?这时候我们可以通过分析网站log文件,网站被k得到,网站大多数情况下有蜘蛛爬取,但很少,只需访问网站robots.txt文件和主页即可。
经过网站全站检查整改后,这次将网站map提交给百度站长工具。 2天后,观察网站服务器日志。如果这种情况已经超过1个月没有维护了,如果好转,可以考虑放弃域名,重启网站。如果这段时间搜索引擎蜘蛛数量明显增加,返回200多个,说明网站正在恢复,之前的收录可能会卷土重来。