网站内容抓取(10.检查死链，设置404页面蜘蛛的爬行速度和勾引)
首页是蜘蛛访问次数最多的页面，也是网站权重最高的页面。可以在首页设置一个更新版块，不仅会更新首页，提升蜘蛛访问频率，还会促进更新页面的爬取网站@收录。在栏目页面上也可以这样做。
10.检查死链接并设置404页
<p>搜索引擎蜘蛛通过链接爬行。如果无法到达的链接太多，不仅会减少
要回复文章请先登录或注册
云端的采集更轻松
