chrome插件网页抓取(WebScraper插件使用方法(网站刮板)(刮板插件))
优采云 发布时间: 2021-10-01 16:13chrome插件网页抓取(WebScraper插件使用方法(网站刮板)(刮板插件))
Web Scraper 插件概述 Web Scraper (网站 scraper) 是一款免费的爬虫工具,适用于任何人,包括没有编程基础。只需点击、点击、点击,四步用户可以使用插件建立页面数据提取规则,从而快速提取网页中需要的内容,最后将捕获的结果导出为Excel可以识别的CSV格式。支持复杂的网站结构,数据支持文本、连接、数据块、下拉加载数据块等多种数据类型。
如何使用Web Scraper插件1. 插件下载安装后,会出现在浏览器右上角的插件栏中。
2.windows系统下可以使用快捷键F12,部分笔记本需要按Fn+F12;Mac系统下,可以使用快捷键command+option+i;也可以直接在Chrome界面操作,点击设置—>更多工具—>开发者工具
3. 打开后的效果如下,绿框是开发者工具的完整界面,红框是Web Scraper区域,是我们后面要操作的部分。
4.注意:如果在浏览器右侧区域打开开发者工具,需要将开发者工具的位置调整到浏览器底部。
5.打开开发者工具,点击Web Scraper选项卡,看到分为三个部分:
6.Sitemaps:站点地图的集合,所有创建的站点地图都会显示在这里,您可以在这里输入站点地图进行修改和数据抓取等操作。
7.站点地图:输入某个站点地图,可以进行一系列的操作,如下图:
8.新建站点地图:首先了解站点地图,字面意思是网站地图,这里可以理解为入口地址,可以理解为对应一个网站,对应一个需求,假设你想得到<在@k20@上回答一个问题>,创建一个站点地图,并将问题的地址设置为站点地图的起始地址,然后点击“创建站点地图”创建站点地图。
Web Scraper插件的详细介绍请参考:Web Scraper v0.3.8