seo网站日志分析工具( 蜘蛛会不断的抓取新鲜的文件日志(文件目录日志))

　　seo网站日志分析工具(

蜘蛛会不断的抓取新鲜的文件日志(文件目录日志))

　　蜘蛛会不断地抓取新文档

　　日志文件目录呢？存储在根目录中，并以wwlogs、log、logs等命名

　　如果没有日志目录怎么办？联系主机制造商

　　为什么要看日志

　　1、蜘蛛抓取的文件（网页、CSS、JS、目录、功能文件）

　　2、制定短期SEO计划，改变一些已经制定但不合理的SEO方法

　　工具：

　　Windows下的编辑器：notpad++

　　日志参数：

　　1、访问IP：用户、爬虫、服务器（黑客服务器、IDC）

　　2、具体就诊时间

　　3、请求：获取实际访问权，发送数据后

　　4、特定访问目录

　　5、状态代码：200正常返回，40页错误，50页服务器错误

　　6、哪种终端类型，Firefox5.0

　　模板：

　　1、网站对目录、文件和页面的特定访问在一周内计算

　　2、own网站更新频率统计信息

　　3、1、两个比较点，列出总结最多的问题

　　状态代码：

　　404页面处理方式：1、删除2、提交

　　301永久重定向，302重定向，304不变

　　徽标分析工具

　　1、先看看404

　　2、真正的百度蜘蛛是什么

　　3、CMD Ping 404 IP

　　1、假蜘蛛，自己的爬行动物

　　2、竞争对手这样做并侵入背景

　　抓取异常的处理：

　　1、确认前端页面或FTP文件可以正常访问

　　2、看看百度抓取例外

　　（1)1正常，2报告错误，主机停机一段时间，超时

　　（2)1异常，2报告错误，由操作不当引起

　　沙箱期：

　　1、新站周期：1-3个月

　　2、减轻大多数页面的重量

　　沙盒标志：蜘蛛访问，超过2个月，只有一个蜘蛛访问，只有一个索引

　　1、域名有问题

　　2、IP段有问题

　　3、均质化过多网站