蜘蛛不能识别jd内部链接的几种常见陷阱！

蜘蛛不能识别jd内部链接的几种常见陷阱！

　　什么是所谓的搜索引擎陷阱？

　　常见的陷阱：

　　1、动态网址

　　动态网址是由于自动调用数据库，使得网站自动生成带参数的网址。一般蜘蛛不喜欢动态网址，因为参数太多会影响蜘蛛爬行的效率。所以网站上线时，把URL设为静态。

　　2、js 导航

　　很多人喜欢用js，js可以给网站带来炫目的视觉效果。尤其是电商网站，特别喜欢用js生成导航。但是搜索引擎很烦人，蜘蛛目前无法识别内部jd链接。在做导航的时候，尽量简化搜索引擎的抓取工作，以得到蜘蛛的青睐。

　　3、会员登录

　　部分网站需要以会员身份登录才能查看网站内容。大家都知道搜索引擎蜘蛛不会填写用户名和密码访问页面进行抓取内容，这就增加了蜘蛛抓取的难度，自然不会收录这些内容。

　　4、flash 使用

　　目前，搜索引擎无法识别 Flash 中的内容。从优化的角度来看，这是一个死胡同。在这里建议大家，如果网站优化了，一定不要用flash来设计网站。如果你非要用flash来展示你的网站信息和实力，那就不需要优化了。

　　5、404 页面

　　如果网站dead链接太多，没有做404页面，你会发现网站做诊断分析的时候，会出现很多页面错误。另一方面也说明搜索引擎对网站非常不友好，会产生拒绝反应。因此，它必须是一个 404 页面。

　　6、导出链接太多

　　一个网站export 链接太多，会导致权重分散。蜘蛛从头到尾爬你网站。当你刚爬到最后还没有进入内页的时候，你给他一个导出链接，然后蜘蛛就会跟着他的导出链接。这就是你经常看到的蜘蛛来了，但是没有理由收录任何页面。