免规则采集器列表算法(一键提取数据简单易学,优采云采集器智能分析网页信息采集工具)

优采云 发布时间: 2022-02-06 06:03

  免规则采集器列表算法(一键提取数据简单易学,优采云采集器智能分析网页信息采集工具)

  优采云采集器是一个非常强大的网页信息采集工具,可以帮助用户一键快速提取各种网页的数据,生成Excel表格和api数据库文档等内容,同时支持互联网99%的网站,让你轻松获取你想要的数据。

  

  【软件特色】一键提取数据

  简单易学,通过可视化界面,鼠标点击即可抓取数据

  快速高效

  内置一套高速浏览器内核,配合HTTP引擎模式,实现快速采集数据

  适用于各种网站

  能够采集99%的互联网网站,包括单页应用Ajax加载等动态类型网站

  【功能介绍】向导模式

  使用简单,通过鼠标点击轻松自动生成

  定期运行的脚本

  无需人工即可按计划运行

  原装高速核心

  自研浏览器内核速度快,远超对手

  智能识别

  智能识别网页中的列表和表单结构(多选框下拉列表等)

  广告拦截

  自定义广告拦截模块,兼容AdblockPlus语法,可添加自定义规则

  各种数据导出

  优采云采集器正式版支持Txt、Excel、MySQL、SQLServer、SQlite、Access、网站等。

  【使用方法】第一步:输入采集网址

  打开软件,新建一个任务,输入需要采集的网站的地址。

  第二步:智能分析,全过程自动提取数据

  进入第二步后,优采云采集器自动智能分析网页,从中提取列表数据。

  步骤 3:将数据导出到表、数据库、网站 等。

  运行任务,将采集中的数据导出到Csv、Excel等各种数据库,支持api导出。

  【FAQ】Q:如何过滤列表中的前N个数据?

  1.有时候我们需要对采集收到的列表进行过滤,比如过滤掉第一组数据(在采集表中,过滤掉表列名)

  2.点击列表模式菜单设置列表xpath

  Q:如何抓包获取cookie并手动设置?

  1.首先用谷歌浏览器打开网站为采集,登录。

  2. 然后按F12,会出现开发者工具,选择Network

  3.然后按 F5 刷新下一页并选择其中一个请求。

  4.复制完成后,在优采云采集器中,编辑任务,进入第三步,指定HTTP Header。

  【更新日志】1.增加插件功能

  2.添加导出txt(一个文件保存为一个文件)

  3.多值连接器支持换行

  4.为数据处理修改了文本映射(支持查找和替换)

  5.修复登录时的 DNS 问题

  6.修复图片下载问题

  7.修复一些json问题

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线