内容 采集 软件(网络矿工数据采集软件稳定版软件的功效,绝对是您的首选)

优采云 发布时间: 2021-11-04 05:04

  内容 采集 软件(网络矿工数据采集软件稳定版软件的功效,绝对是您的首选)

  网络矿工数据采集软件稳定版是一款面向个人和专业用户的专业数据采集软件。它适用于简单的配置操作,也适用于复杂的数据采集 能力,所见即所得。网络矿工数据采集软件稳定版独有的代理轮询采集机制,有效解决网站屏蔽问题。还提供了网络雷达功能,可用于动态上网数据监控,一套软件的价格,两套软件的功效,绝对是您的首选!

  

  网络矿工数据采集软件稳定版软件特点

  数据采集函数

  1、 多任务,多线程,支持一个任务运行多个实例;采集规则与运行实例分离的好处是,修改任务信息后,不影响已经运行的任务;

  2、支持图片、Flash和文件下载;下载不支持多线程处理;

  3、URL 配置支持参数自定义和外部字典参数;自定义参数值可以通过字典方式进行扩展;

  4、支持Cookies,POST采集;可以记录cookies,采集网站需要登录的数据,或者手动登录采集;

  5、支持导航,自动翻页;可以进行网站导航,例如:通过新闻列表采集新闻内容;支持多层导航;

  6、可以采集ajax数据;关于Ajax技术网站,需要通过HTTP嗅探器检测其真实地址;推荐使用提琴手;

  7、采集 临时存储数据,断点恢复采样;暂存数据格式为XML;

  8、支持数据导出、文件、数据库;数据库支持Access、MS SqlServer、MySql,文件支持文本文件和Excel;数据导出支持手动和自动,手动导出只支持文件格式;

  9、提供URL编码/解码工具;支持UTF-8、GB2312、GBK、Big5;

  10、在线数据发布;支持在线数据发布,数据发布支持Cookie;

  11、数据采集支持采集数据处理;可以对采集数据进行字符串替换、截取、追加操作,可以自动去除网页符号,支持常规规则;

  12、支持任务规划;任务可以定时执行,最小间隔为:0.5小时;

  13、支持任务触发;可以触发采集任务、数据库存储过程和可执行文件,支持采集完成和释放完成触发器;

  14、支持采集数据URL的自动输出;可作为内容参考和错误查找;

  15、支持采集延时;对于访问受限的网站,可以使用采集延时来控制网站的采集在单位时间频率内;

  16、支持分层数据采集;通常称为分页采集、级联采集,支持1对1和1对N的数据关系;

  17、支持Url Base64编码。部分网站采用Base64编码Url支持,还有采集这样的网站数据;

  18、 支持外部字典数据导入,可以批量导入字典数据;

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线