谷歌网页视频抓取工具(新版谷歌网站管理员工具抓取错误的功能介绍(组图))

　　谷歌网页视频抓取工具(新版谷歌网站管理员工具抓取错误的功能介绍(组图))

　　抓取错误是 Google网站Admin Tools 中最受欢迎的功能之一，今天我们进行了一些非常重要的改进以使其更加有用，新的 Google网站Administrator Tool 抓取错误功能介绍.

　　抓取错误现在可以检测和报告几种新的错误类型。为了使新数据更容易理解，我们将错误分为两类：网站错误和 URL 错误。

　　网站错误

　　网站错误不会影响特定的 URL，但会影响整个 网站，包括 DNS 解析失败、Web 服务器连接问题以及对 robots.txt 文件的访问。过去，我们通常只报告相关的 URL 错误，但这没有多大意义，因为它们并非特定于 URL。事实上，这种错误可能会阻止 Googlebot 请求某个 URL！我们现在正在跟踪和记录网站错误频率，并在错误率达到一定水平时提醒您。

　　按周期查看 网站 错误的频率

　　另外，如果您的 网站 从未出现过类似的错误，或者最近没有出现过错误，请忽略此部分，我们只是提供一些友好的提示，让您知道您的系统一切正常。

　　网站 最近没有 网站 错误

　　网址错误

　　URL 错误是特定于特定页面的错误。也就是说，当 Googlebot 尝试抓取该 URL 时，它能够解析您的 DNS，连接到您的服务器，获取并读取您的 robots.txt 文件，然后请求该 URL，但之后它会出错。我们根据错误的不同原因将 URL 错误分类为各种类型。如果您的 网站 提供 Google 新闻或移动数据 (CHTML/XHTML)，我们将以不同的类别向您显示这些错误。

　　URL 错误类别以及当前和历史数据

　　信息更少但更有效

　　过去，每种错误类型最多可显示 100,000 个错误。可见，在短时间内处理如此大量的错误信息时，确实分不清重要的（比如你的主页打不开）和次要的。

　　错误（某人 网站 在链接到您的页面时出现拼写错误）。查看所有这 100,000 个错误是不切实际的，因为无法对您的进度进行排序、搜索或记录。但在更新的抓取错误功能中，我们将在最重要的位置为您带来最重要的错误信息。对于每种错误类型，我们都会为您提供最重要且可操作的 1000 条错误消息，即管理材料“新 Google 网站Administrator Tools Crawling Error Features”()。您可以对此进行排序和过滤，在您认为该错误已修复时告诉我们，并浏览详细信息。

　　错误信息的实时分类或过滤

　　有的网站对于某个类型可能有1000多个特定错误。因此，超出此数量的错误仍然可以反映在错误总数中，同时还以图例显示过去 90 天的历史错误数据。可能有人担心 1000 个错误详细信息加上总数可能不够，因此我们正在考虑提供一个 API，以便您可以下载最后一个错误。如果您需要这方面的更多信息，请告诉我们您的反馈。

　　我们还删除了被 robots.txt 阻止的页面列表。因为，虽然这些页面有时有助于诊断 robots.txt 错误，但它们通常会被您故意阻止。为了关注错误本身，请转到网站设置部分的“爬虫工具访问”页面，找到被阻止的 URL 链接地址。

　　深入的问题细节

　　单击主列表中的单个错误 URL 会打开一个窗口，显示错误的详细信息，包括我们上次尝试抓取处理 URL 的时间、发现错误的最早时间以及错误的简要说明。

　　每个 URL 错误的详细信息

　　在详细信息窗口中，您可以单击导致错误的特定 URL，以检查访问时出现的问题。如果没有错误，您可以将错误标记为“已修复”（稍后将提供更多选项），或者您可以查看此类错误的帮助，列出收录 URL 的站点地图，浏览指向URL 其他页面等，甚至使用 Googlebot 立即获取 URL 以了解更多信息或仔细检查修复是否成功。

　　浏览链接到该 URL 的页面

　　采取行动！

　　我们很高兴地看到，在新的抓取错误功能中，您可以专注于优先处理最重要的错误。我们对错误列表进行了排序，以便您可以采取措施解决高优先级项目，例如修复 网站 上的错误链接、修复服务器软件中的错误以及更新站点地图以减少故障 URL，或添加301重定向，让用户进入真正有效的页面等，所有这些你都可以有条不紊地进行。在确定优先级时，我们会考虑许多因素，包括您是否在站点地图中收录 URL、有多少页面链接到该地址（以及这些页面是否都是您自己的 网站）、流量是多少此 URL 最近从搜索引擎获取等。

　　如果您是具有完全访问权限的用户，一旦您认为您已经修复了错误（您可以像 Googlebot 那样通过抓取 URL 来检测），您可以通过将错误标记为“已修复”我们来通知您。此后，除非我们在尝试重新抓取 URL 时遇到相同的错误，否则错误将不会放在错误列表的顶部。

　　选择错误并将其标记为已修复

　　我们为新的抓取错误功能付出了很多努力，我们真诚地希望它有所帮助。如果您有任何意见或建议，请在我们的论坛上分享！