搜索引擎优化名词解释(东莞搜索引擎优化蜘蛛如何知道某搜索引擎是否来过你的网站)

　　搜索引擎优化名词解释(东莞搜索引擎优化蜘蛛如何知道某搜索引擎是否来过你的网站)

　　说到搜索引擎，不得不提到一个动物术语：蜘蛛。东莞搜索引擎优化蜘蛛是搜索引擎中不可缺少的自动程序。其功能是访问网站、网页、图片、视频等互联网信息。我们如何知道搜索引擎是否抓取了您的网站？登录服务器管理页面，下载访问日志。搜索引擎蜘蛛的一般用法是：“蜘蛛+URL”，其中URL为搜索引擎访问，同时可以查看访问的具体时间和频率。蜘蛛主要通过爬取网站页面来发现新页面。一般来说，实现它们的策略有两种，一种是深度优先爬行，一种是广度优先爬行。

　　搜索引擎蜘蛛抓取后，网页被抓取回来。接下来的工作就是“取精去渣”对数据进行预处理，包括：关键词提取，去JS，CSS，DIV标签，建立正向索引和倒排索引，链接关系计算，特殊文件处理等。和爬虫一样，预处理是在后台提前完成的。

　　经过爬取和预处理，搜索引擎服务器已经存储了一些数据，记录了关键词的重要集合。每个 关键词 都被赋予一个特殊的代码来形成一个倒置文件。输入一个关键词，从相关单据编号中查找相关信息。输出结果为列表形式。例如，GOOGLE 使用预加载的 Web 视图来增强用户体验。用户无需点击链接即可看到整个网页的布局和分布，更加人性化。