chrome抓取网页插件(XPathhelper插件功能介绍Helper插件有什么什么用？)

　　chrome抓取网页插件(XPathhelper插件功能介绍Helper插件有什么什么用？)

　　最近在学习使用scrapy框架开发python爬虫程序，使用xpath获取URL路径。因为HTML中标签太多，找xpath的路径总是要花很长时间，有时还容易出错，造成时间和精力的浪费。今天在看一篇文章的文章时，无意中看到了chrome中的爬虫网页解析工具XPath Helper。使用后，感觉非常好，所以希望能帮助到更多的python爬虫爱好者和开发者。XPath 助手插件概述

　　什么是 xPath Helper 插件？

　　xPath helper 是 Chrome 浏览器的开发者插件。安装 xPath helper 后，您可以轻松获取 HTML 元素的 xPath。程序员不再需要搜索html源代码，定位一些id来找到对应的位置进行分析。网页。

　　XPath Helper 插件功能介绍 XPath Helper 插件有什么用？

　　google 插件XPath Helper 可以支持通过点击网页上的元素来生成xpath。整个爬取使用了xpath、正则表达式、消息中间件、多线程调度框架（参考）。xpath 是一个结构化的网页元素选择器，支持列表和单节点数据获取。其优点是可以支持常规的网页数据爬取。

　　如果我们要查找某个元素或某个元素块的xpath路径，可以按住shift键移动到这个块，上框会显示这个元素的xpath路径，解析后的文本内容会显示在对了，我们可以自己改变xpath路径，程序会自动显示对应的位置，可以帮助我们判断我们的xpath语句是否写对了。

　　XPath 助手插件下载安装 哪里可以下载XPath 助手插件？您可以从 chrome 应用商店找到 chrome crawler 插件。如果你的chrome应用商店打不开，可以到github官方网站下载安装：下载安装，或者到开发者插件下载-Chrome插件网

　　如何安装 XPath 助手插件？

　　1. 如果可以打开chrome应用商店，可以找到chrome爬虫插件，那么直接点击“添加到chrome”，如下图：

　　2.如果你的chrome应用商店打不开，并且你已经从本站或其他来源获取了chrome爬虫插件，那么选择离线安装插件。由于chrome爬虫插件和其他chrome插件一样都是CRX格式的，具体安装方法请参考：如何在谷歌浏览器中安装扩展名为.crx的离线Chrome插件？CRX格式插件无法离线安装怎么办？

　　Xpath helper插件使用说明1. Chrome浏览器安装xpath helper插件后，打开一个网页（以搜狐为例），复制目标页面元素的XPATH，如下图数字：

　　2. 点击Ctrl + Shift + X激活XPath Helper控制台，然后可以在Query文本框中输入对应的XPath进行调试，提取的结果会显示在旁边的Result文本框中，如下图所示：

　　1. 打开一个新标签页并导航到您喜欢的网页。

　　2. 按Ctrl-Shift-X 打开XPath 辅助控制台。

　　3. 按住 Shift 键并将鼠标悬停在页面上的元素上。查询框将不断更新以显示鼠标指针下元素的完整 XPath 查询。结果框的右侧将显示评估结果的查询。

　　4. 如有必要，您可以直接在控制台中编辑 XPath 查询。任何更改都会立即反映在结果框中。

　　5. 再次按下 Ctrl-Shift-X 关闭控制台

　　XPath 助手插件注意事项

　　XPath Helper 插件虽然使用起来很方便，但也不是万能的。有两个问题：

　　1. XPath Helper自动提取的XPath从根路径开始，几乎不可避免地导致XPath过长，不利于维护；

　　2. 在提取循环列表数据时，XPath Helper使用下标分别提取列表中的每条数据，不适合程序批处理，还需要像*标记一样手动修改。

　　不过，合理使用Xpath还是可以为我们节省不少时间的！