采集系统(统计数据采集系统分为哪几类?不同维度进行区分)

优采云 发布时间: 2021-10-28 11:02

  采集系统(统计数据采集系统分为哪几类?不同维度进行区分)

  采集系统是统计数据的最为核心的问题。因此如何能够拿到并重塑用户数据成为最为关键的问题。根据pgc做数据采集系统需要多大的采集能力,来建设采集数据库,且对数据的可视化、可控制、记录更新以及关联性分析都有一定的技术门槛。1,采集系统分为哪几类?根据成本和需求区分,可以把采集系统按照采集接口和分布型(tp)、远程分布型(pps)以及远程分布型(eps)不同的维度进行区分,下面将逐一进行介绍。

  2,tp采集系统:tp是把日志数据,都自己部署到自己云端,在云端有采集系统的硬件上进行分析处理以及数据采集。tp采集系统一般是服务器+采集服务器+管理服务器+数据传输服务器。3,pps采集系统:pps采集系统在不同的网站或者app中采集用户行为日志,在第三方统计机构也会采集第三方的app应用的数据,对此采集系统有较大的问题,一是云端的内容数据受限,二是在数据库中存储的日志内容不是原始日志的实时变化,所以需要对原始数据进行变更和分析。

  4,远程分布采集系统:近两年开始兴起,根据业务拓展需求做延伸,把采集的接口拓展到到远程客户端。如何规划更为有效的远程分布采集系统成为最大的难题。5,远程分布式采集系统:无论是tp、pps还是远程分布式采集系统,目前的环境下都没法在服务器或者云端部署,成本过高。一般需要在企业内部部署一个服务器来运行。6,es服务器采集系统:es服务器采集系统按照服务器、数据库、日志数据库进行区分,采集技术为shell+采集数据库。

  7,随着国内市场的成熟,也有越来越多的企业愿意选择做paas化的云服务,如vcloud、七牛等厂商。但是在paas服务推行上,中小企业和跨地域业务平台技术人员素质差距较大,也正是需要这样的服务支撑才能提升数据准确性,采集体验和成本并控。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线