最新采集器(如何过滤列表中的前N个数据?(组图))
优采云 发布时间: 2021-08-31 09:00最新采集器(如何过滤列表中的前N个数据?(组图))
优采云采集器V2是一款高效的网页信息采集软件,支持99%的网站数据采集、优采云采集器可以生成Excel表格、api数据库文件等内容,为了帮助您管理网站数据信息,如果您需要采集特定网页数据,只需使用本软件即可。
软件功能
一键提取数据
简单易学,通过可视化界面,鼠标点击即可采集数据
快速高效
内置一套高速浏览器内核,加上HTTP引擎模式,实现快速采集data
适用于各种网站
采集 Internet 99% 网站,包括单页应用ajax加载等动态类型网站
功能介绍
向导模式
简单易用,轻松点击鼠标自动生成
脚本定期运行
可按计划运行,无需人工
原装高速内核
自主研发的浏览器内核速度快,远超对手
智能识别
可以智能识别网页中的列表和表单结构(多选框下拉列表等)
广告拦截
自定义广告拦截模块,兼容AdblockPlus语法,可添加自定义规则
多数据导出
支持 Txt、Excel、MySQL、SQLServer、SQlite、Access、网站 等
如何使用
第一步:输入采集URL
打开软件,新建一个任务,输入需要采集的网站地址。
第二步:智能分析,全程自动提取数据
进入第二步后优采云采集器自动智能分析网页并从中提取列表数据。
第三步:导出数据到表、数据库、网站等
运行任务,从采集导出数据到Csv、Excel和各种数据库,支持api导出。
常见问题
问:如何过滤列表中的前N个数据?
1.有时候我们需要过滤采集收到的列表,比如过滤掉第一组数据(采集表的情况,过滤掉表列名)
2.在列表模式菜单中点击,设置列表xpath
问:如何抓取cookies获取cookies并手动设置?
1. 首先用谷歌浏览器打开你要采集的网站,然后登录。
2.然后按F12,会出现开发者工具,选择Network
3. 然后按 F5 刷新下一页并选择其中一个请求。
4.复制完成后,在优采云采集器编辑任务,进入第三步指定HTTP Header。
更新日志
3.0.2.4
2020/12/22
修复文件下载可能导致部分文件不完整
修复批量参数问题,重定向后部分网址丢失
优化脚步指令输入
优化识别列表
修复编辑器的json测试问题