搜索引擎如何抓取网页(如何让网站被搜索引擎识别、索引收录（1）》)

　　搜索引擎如何抓取网页(如何让网站被搜索引擎识别、索引收录（1）》)

　　如果想让网站被搜索引擎索引收录，就需要构建一个易于识别、被搜索引擎索引、可以在手机端呈现的网站边。

　　下面，我们将从域名、服务器、网页加载速度、网站结构、url结构、PC端和移动端适配、网站收录、网页过滤和数据库等八个方面进行讨论建造。方面进行了说明。

　　在阅读这篇文章文章之前，你可以先阅读《如何让网站被搜索引擎索引收录（1））》。

　　图片来自网络

　　4.网站结构

　　一个理想的网站结构应该尽可能的扁平化，从网站首页到内容页面的层数尽可能少，这样搜索引擎更容易处理。因此，网站结构推荐采用树形结构，通常分为[首页]、[频道]、[文章页面]三个层次。

　　移动端网站的优化重点是移动端网站首页应该有重要的栏目导航、更多的详情页和重要的引流页面入口。所以，网站首页的布局不能太简单，页面内容也不能太简单。

　　5.网址结构

　　Url结构应该是描述性好的、规范的、简洁的url，可以帮助用户更方便快速的记忆和直观地判断网页的内容，也可以帮助搜索引擎更高效地识别和抓取网页。

　　① 详情页的url尽量短，这是为了减少无效参数，比如统计参数。同时，确保同一页面中只有一组 url 地址。如果有不同形式的url，应该使用301重定向跳转到正常的url。

　　②Rob​​ots文件可以防止百度搜索引擎蜘蛛抓取不希望展示给用户的内容，或者不希望被搜索引擎抓取的隐私数据。

　　③移动端的网址网站也需要是静态的，即不要使用收录过多参数和符号的网址，避免使用中文网址。

　　6.PC端网站和移动端网站的适配

　　站点适配是百度搜索引擎提出的一个概念。主要是通过网站meta加代码，提交网站地图到百度站长工具，帮助搜索引擎快速准确的了解PC端网站和手机端网站@ > 之间的关联。站点适配帮助百度在移动搜索中将原来的PC端网页结果替换为相应的移动端网页结果。

　　7.网站被动抓取

　　当PC端网站适配移动端网站，我们只需要等待百度搜索引擎抓取网站页面收录即可。

　　8.网页过滤和数据库构建

　　事实上，百度搜索引擎有一个专门的移动数据库。为了让更多的移动 网站 页面被索引，我们需要让移动 网站 有足够的特征来区分它与 PC 网站 页面，这将有助于改进 收录@ > 移动 网站 页面的数量。

　　（1)网站域名尽量以m./wap/3g/mobi./mobile./i.等开头。

　　（2)手机网站写在网页头。

　　以上就是《如何让网站被搜索引擎收录收录（2））》的全部内容，感谢您的阅读，希望对您有所帮助！