搜索引擎优化自学(如何分析网站日志中的内容?新手SEO站长怎么做)

　　搜索引擎优化自学(如何分析网站日志中的内容?新手SEO站长怎么做)

　　作为站长，如果你连网站日志是什么都不知道，或者根本不在意，我只能说你是个不称职的网站站长，曾经网站如果出了问题，你一定很无奈！即使你掌握了SEO的基础知识，你也必须善于分析网站日志。

　　很多新手SEO站长可能觉得不分析网站日志是无关紧要的。相信大家都在自己的网站上安装了网站统计代码，比如谷歌分析、量子统计、百度统计、cnzz、51.la等。这些工具可以统计网站，但是这些工具都不能统计你主机上资源的原创访问信息，比如谁下载了某个图片，也不能统计那些没有添加统计代码的地方，比如后台操作页面.

　　大多数计费主机提供原创访问日志。网站服务器会自动记录每个访问者访问的一些信息，并保存在原创访问日志文件中。如果您的主机不提供日志功能，建议您在到期后更换主机。日志记录了网站上所有资源的访问信息，包括网页打开过程中加载的图片、CSS、JS、FLASH、HTML、MP3等资源，并记录了谁访问和使用了这些资源。访问什么，访问结果是什么等等，可以说原创访问日志记录了主机的所有资源使用情况。

　　分析网站日志有什么用？

　　1、我们可以更准确的定位搜索引擎蜘蛛爬我们的网站次，并且可以屏蔽伪蜘蛛（这样的蜘蛛多为采集，会增加我们服务器的开销） ;

　　2、通过分析网站的日志，可以准确定位搜索引擎蜘蛛抓取的页面和时间长短，依次微调我们的网站；

　　3、http返回一个状态码，每次搜索引擎蜘蛛和用户访问我们的网站，服务器端会不会产生类似301、404、200的状态？我们可以参考这类信息向我们展示问题的网站进行简单的诊断，及时处理问题。

　　如何分析网站日志的内容？

　　一、注意经常访问的资源

　　如果在日志中，你发现某个资源（网页、图片、mp3等）被频繁访问，那么你要注意该资源的使用位置！如果这些请求的来源（Referer）不是你的网站或者是空的，并且状态码（Http Code）是200，则说明你的资源很可能被盗了。通过Referer可以查到盗链者的URL，这可能是你的网站流量暴增的原因，你要做好防盗链。

　　二、注意对 网站 上不存在的资源的请求

　　如果某些请求信息不是本站的资源，Http Code不是403就是404，但从名称上分析，可能是保存数据库信息的文件。如果这个信息被别人拿走了，那么很容易过度攻击你的网站。发起这些请求的目的无非是扫描你的 网站 漏洞。漫无目的地扫描下载这些已知的漏洞文件，很有可能会发现你的网站的某个漏洞！通过观察可以发现，这些请求中使用的 Agents 几乎都是 Mozilla/4.0、Mozilla/5.0 或 libwww-perl/ 等非常规浏览器类型。上面提供。日志格式化工具为这些请求集成了警报。我们可以通过禁止这些代理的访问来防止这些代理被扫描。下面将介绍具体方法。

　　三、观察搜索引擎蜘蛛的访问

　　通过观察日志中的信息，可以看到你的网站被蜘蛛访问的频率，进而可以看出你的网站是否被搜索引擎青睐。这些都是 SEO 问题。. 日志格式化工具集成了搜索引擎蜘蛛的提示。常见搜索引擎蜘蛛使用的Agent列表如下：

　　谷歌蜘蛛：Mozilla/5.0（兼容；Googlebot/2.1；+）

　　百度蜘蛛：百度蜘蛛+(+)

　　雅虎！蜘蛛：Mozilla/5.0（兼容；Yahoo! Slurp/3.0;）

　　雅虎！Slurp 中国：Mozilla/5.0（兼容；Yahoo! Slurp 中国；）

　　微软必应蜘蛛：msnbot/2.0b (+)

　　Google Adsense 蜘蛛：媒体合作伙伴 - Google

　　有道机器人：Mozilla/5.0（兼容；有道机器人/1.0;）

　　搜搜搜搜博客蜘蛛：搜搜博客蜘蛛+(+)

　　搜狗搜狗蜘蛛：搜狗网络蜘蛛/4.0(+#07)

　　Twiceler 爬虫：Mozilla/5.0 (Twiceler-0.9 )

　　谷歌图片搜索蜘蛛：Googlebot-Image/1.0

　　*敏*感*词*Yandex搜索引擎蜘蛛：Yandex/1.01.001（兼容；Win16；I）

　　Alexa Spider：ia_archiver (+)

　　Feedsky 蜘蛛：Mozilla 5.0（兼容；Feedsky 爬虫/1.0)

　　韩国雪人蜘蛛：雪人/1.0 (NHN Corp.; )

　　四、观察访客行为

　　通过查看格式化日志，可以查看和跟踪某个IP在一定时间内的一系列访问行为。单个IP的访问记录越多，你的网站PV就越高，用户粘性越好；如果单个IP有多个访问记录 Hi Hi，IP访问记录，你应该考虑如何让你的网站内容更有吸引力。通过分析访问者的行为，可以为你的网站建设提供有力的参考，哪些内容好哪些内容不好，确定网站的发展方向；通过分析访问者的行为，看看他们都在做什么，你可以推测访问者的意图，及时找出恶意用户。

　　总结：还有一点要介绍的是，当网站遇到来自搜索引擎的K-drop时，网站日志可以为我们提供K-drop的原因（我认为是站群的朋友们）），并且通过网站的日志相关数据，可以看到搜索引擎何时恢复正常访问网站，这样我们可以选择继续或者放弃，虽然很无奈，但也是不得已而为之的明智选择。

　　90% 的人还阅读了以下 文章：