解决方案:优采云data下任务文件夹的SpiderResult.db3文件用什么软件打开
优采云 发布时间: 2022-12-14 07:22解决方案:优采云data下任务文件夹的SpiderResult.db3文件用什么软件打开
优采云采集器默认使用sqlite数据库保存数据。新建一个采集,打开data/task/找到一个SpiderResult.db3文件,.db3是sqlite存储文件的后缀,那么如何查看这些文件呢?用什么软件可以打开?四处寻找后,我终于理清了思路。论坛里kuhabe提到可以用SQLiteSpy打开,但是下载链接已经过期了。也许 优采云 不想让其他人发现我使用的技术。知道了具体的软件,还怕下载不下来吗?哈哈哈!
搜索引擎是个好帮手。下载安装后,直接将SpiderResult.db3文件拖到左侧数据库列表中即可显示,如下图
需要的朋友赶紧试试吧
优化的解决方案:大数据:数据采集平台之Apache Chukwa
大数据:数据采集平台的Apache Chukwa
阿帕奇水槽
有关更多信息,请参阅 文章:大数据:面向数据采集平台的 Apache Flume
流利
有关更多信息,请参阅 文章:大数据:数据采集平台的流畅性
日志存储
有关更多信息,请参阅 文章:大数据:数据采集平台的日志存储
阿帕奇楚夸
有关更多信息,请参阅 文章:大数据:用于数据采集平台的 Apache Chukwa
抄写员
有关更多信息,请参阅 文章:大数据:数据采集平台的抄写员
斯普伦克货运代理
请参阅文章:大数据:用于数据采集平台的 Splunk 转发器
官方网站:
阿帕奇
Chukwa是Apache的开源数据采集平台,除了Apache Flume之外。Chukwa建立在Hadoop的HDFS和Map Reduce上(显然,它是用Java实现的),提供了可扩展性和可靠性。Chukwa还提供数据的呈现,分析和监控。该项目不再活跃,它在 GitHub 上的最后一次更新是在 7 年前。
楚夸的部署架构如下:
Chukwa的主要单元是:Agent,Collector,DataSink,ArchiveBuilder,Demux等,看起来相当复杂。
参考: