seo网站日志分析工具(网站的蜘蛛日志是什么意思？蜘蛛来路如何分析？)

　　seo网站日志分析工具(网站的蜘蛛日志是什么意思？蜘蛛来路如何分析？)

　　通常我们在做网站优化的时候，我们想知道是哪些搜索引擎蜘蛛访问了我们网站，或者网站为什么不收录稍等一下，原因是有是网站的问题！那么这时候我们就可以通过网站日志下载，查看里面各种蜘蛛的来历，分析一下！但是有很多优化师和站长不了解这一点，网上也有很多问题，所以今天就趁这个机会跟大家聊一聊吧！

　　一、网站蜘蛛日志是什么意思？

　　关于网站的蜘蛛是指各大搜索引擎向服务器发送请求时生成的访问日志文件，服务器中生成固定的网站日志，格式为某个.log文件形式存在。

　　二、如何分析蜘蛛日志？

　　1、首先下载网站日志后，使用光年日志将你的网站日志导入本工具并打开。里面会有每日蜘蛛访问记录。有蜘蛛ip，蜘蛛访问日期，蜘蛛每天爬你的网站目录和页面，蜘蛛返回的状态码，蜘蛛来源类型。

　　2、查看蜘蛛的方式是使用蜘蛛源ip，每个蜘蛛ip代表不同的含义，比如经常以12开头的蜘蛛3.125.68. ip的情况，说明你网站可能进入沙盒期了！220.181.68 如果ip蜘蛛经常来，说明你网站可能是K站！220.181.7、123.125.66 代表百度蜘蛛IP来抓取，准备抓取你的网站页面NS .

　　3、网站 日志文件中返回的状态码有不同的含义。比如200状态码表示你的网站蜘蛛返回成功，页面抓取成功，404状态码表示蜘蛛没有访问你的网站页面。301代表当蜘蛛爬到某个网页时，我们的某个网页跳转了。403状态码表示服务器拒绝蜘蛛爬行，你可以去看看robots是否设置为禁止所有蜘蛛爬行！如果出现 500 状态码，则表示内部服务器错误，蜘蛛一定无法抓取您的页面。

　　4、 蜘蛛源类型如下： 百度蜘蛛代表百度蜘蛛类型。Googlebot：Googlebot 蜘蛛类型。搜狗：代表搜狗蜘蛛类型。360Spider：代表360蜘蛛类型。

　　三、蜘蛛日志对网站优化有影响吗？

　　蜘蛛日志在我们平时对网站的优化中起到了非常重要的作用。具体功能如下：

　　1、您可以根据蜘蛛ip来源、是否需要调整等查看我们网站近期的健康状况。

　　2、根据蜘蛛来源的类型，可以知道最近有哪些搜索引擎平台来了网站，哪些搜索引擎平台来的比较少，是什么原因造成的。可以及时调整添加网站ip数量和转化率！

　　3、可以用蜘蛛爬取你的网站目录页面等，可以清楚的知道你网站哪些页面是优质页面，可以参考，也可以以后写文案的时候吸取精华。做更多搜索引擎喜欢的网站页面！

　　总结：在网站优化的过程中，网站蜘蛛日志一定不能马虎。一定要用好，对以后的优化起到非常重要的作用！