谷歌网页视频抓取工具(谷歌站长平台Google抓取方式工具升级,新增抓取并呈现功能)
优采云 发布时间: 2021-10-13 12:20谷歌网页视频抓取工具(谷歌站长平台Google抓取方式工具升级,新增抓取并呈现功能)
谷歌站长平台谷歌爬取工具进行了升级,增加了新的抓取和渲染功能(Fetch and Render)。在谷歌抓取工具之前,只有一个抓取工具,只能看到Googlebot抓取的网页代码,并且会抓取。获取网页并将它们提交到索引。这是在百度的爬虫诊断工具之前。现在加入了新的抓取渲染功能,不仅可以看到抓取到的代码,还可以看到Googlebot抓取的网页结果的完整渲染。
以下是新增的爬取和渲染功能:
可以看到,Google Fetch Method 工具添加了爬取和渲染按钮,它不仅适用于桌面,还适用于移动版、XHTML/WML 和 cHTML 版。现在爬取呈现的功能不仅仅是看代码和HTML输出,谷歌还会直观的呈现Googlebot看到的内容。更方便站长检查Googlebot的抓取效果和网页的一些问题。只需在捕获和呈现的结果上单击“√”。我们以桌面为例。
Googlebot 对该网页的抓取结果已完整呈现。点击旁边的抓取按钮以查看 Googlebot 看到的代码。并且底部还会显示一些Googlebot无法获取的资源,方便站长查看。移动终端上的显示也是如此。我不会在这里举例。是查看移动台抓取和显示情况的好方法。
不知道百度站长工具以后会不会升级爬虫诊断工具,还会显示被爬取网页的视觉效果。