总结:埋点，数据产品经理必备的技能

　　总结:埋点，数据产品经理必备的技能

　　数据是数据产品的基础，埋点是数据的起点；如果没有埋点，数据产品就是被动水。

　　可以说，埋没是互联网行业遇到的一个关键且无法回避的问题。

　　以下是企业不同岗位学员的内部操作系统：

　　商科同学不知道埋什么，也不知道埋什么；所以他们经常做功能但不做掩埋。需要数据分析的时候，他们去找数据组要数据，数据组会反问：“你埋了吗？”

　　对于数据产品来说，由于对业务没有深入的了解，经常会出现遗漏、误葬的情况，最终导致无数理想的结果。

　　业务开发，本质上就是解决业务相关的问题，而数据开发对他们来说是额外的工作，所以他们的开发成本会随着埋点需求的增加而增加，也可能伴随着项目延期的风险；隐藏的开发需求也可能导致代码冗余。

　　对于数据分析，他们更多地使用数据，找不到数据埋藏的规律，从而无法通过数据驱动很好地进行分析。

　　1、data采集的过程是什么？数据从何而来

　　外部数据交互：如API数据的传输、数据文件的传输等。目前某平台的大数据标注系统就是通过这种方式传输完成企业的人群标注。

　　从整个数据链路来看，数据产品基本上可以分为以下几个流程：

　　首先数据采集我们需要从不同的终端获取不同的数据采集，然后进行数据清洗和处理（ETL），然后聚合到数据仓库中进行用户分析，用户画像、精准营销等；

　　在我们知道了data采集和data embedding的重要性之后，在提出实际的业务功能需求的时候，一定要提到相关的embedding需求，那么接下来我们就需要关注如何让data采集是什么样的了过程？

　　业务方确认功能并发起跟踪需求：提交页面、触发控件、触发场景等；专门的跟踪团队将进行系统验证以确保命名约定和一致性，BI将审查跟踪应用程序和统计要求是否合理或缺失等；审查后，嵌入点采集框架的设计开发与实现，嵌入点的开发，嵌入点完成后的测试；测试预写可以覆盖所有场景的业务场景，测试通过更新需求状态；业务验证、数据开发和数据分析；

　　以上环节缺一不可，归根结底只有标准化的流程才能找到正确的现状问题。

　　

　　二、如何选择埋点方案？

　　目前，互联网行业主流的埋地解决方案主要分为四种：

　　1、第一类：代码嵌入，分为前端嵌入和后端嵌入；前端嵌入是通过前端代码嵌入来监控用户触发页面的数据采集

　　前端嵌入点优势很明显，但劣势也很明显。因为前端嵌入点的数据是通过延迟上报机制上报的，比如用户点击页面上的按钮，不会立即上报，而是累计到一定值后才会累计。批量工作受到当前网络条件的限制。如果出现网络拥塞等问题，数据包就会丢失。所以前端埋点的丢包率比较高，一般在5%~10%。

　　而如果前端埋点缺失或埋错，则必须通过app发布进行优化，客户端发布需要较长时间。

　　2.第二种：服务器端埋点：在API接口中植入埋点代码段

　　好处是每次用户触发这个请求，都会触发嵌入代码进行数据统计，所以不需要发布版本，及时触发及时更新。

　　缺点是服务端埋点需要依赖服务请求，无法覆盖所有前端交互，对于用户路径采集来说比较弱。

　　3、第三种：全埋；这是在互联网上增加用户资本的公司提出的一个埋葬想法。通过地埋SDK的接入，实现了页面上所有采集页面元素的浏览和点击行为。统一采集，不​​是按时间和需求采集，而是全部提前采集

　　优点是开发成本高，SDK接入后维护成本低，埋藏过程也很简单；采集 先定义再定义，在一定程度上可以避免错位错位。

　　缺点是数据冗余，使得很多数据无用，而数据采集的范围只是页面的可见元素，比如曝光，无法采集访问；数据的准确性也存在问题。

　　4、第四类：可视化埋点；也是连接埋点SDK，但不是随时随地采集，而是按需采集，通过视觉圈选触发埋点采集

　　优点是操作简单，按需埋点不会采集无效数据，开发成本比较低；并且数据埋点可以支持undo操作，一般来说数据量会比全埋点小很多。

　　缺点：历史数据无法恢复，因为我们圈选动作之前的数据不能是采集；统计范围只支持页面最前面的动作，比如曝光，不能是采集采集。

　　3、了解了各种埋地方案后，在实际工作中如何选择埋地方案？

　　

　　选择埋点方案的参考主要基于三点：

　　业务发展阶段：开发投入成本、业务迭代速度业务属性：交互应用、业务交易分析深度：用户行为分析、业务分析、业务应用

　　例如，我们可以根据业务发展的阶段来决定。比如现在业务发展迅速，版本迭代速度快，开发投入成本高。那么就不适合我们做client-side和server-side embedding，因为可能不是这样。版本更新需要多长时间，所以full embedding和visual embedding比较合适；

　　对于比较强的业务数据分析场景，需要增加前端客户端嵌入点；并且需要考虑分析的深度。如果只是想看用户的前端行为路径，那么全嵌入点和视觉嵌入点都可以满足需求。，但如果分析整个业务流程，则必须配合代码埋点。

　　我推荐全埋点+代码埋点的组合，服务端怎么做，服务端优先，这样数据准确率会更高。

　　4、确定埋点选择后，开始详细设计埋点。

　　事件是跟踪点中最重要的元素。如果要明确定位跟踪点，就必须从六个维度进行定义。我们可以将其概括为谁、何时、何地、什么、为什么和如何；这些元素用于构建事件的基本元素。

　　事件主要分为三种类型：

　　互动事件：浏览、点击、采集、支付、曝光、关闭；系统事件：APP启动、APP崩溃；业务状态：支付成功、用户续费等（这很大程度上取决于服务器的返回）。

　　通过以上，我们基本可以判断出我们需要记录用户什么行为，什么数据采集，后续分析什么。

　　写在最后，在我的工作生活中，过去的坑告诉我一个好的跟踪管理平台是多么重要。

　　首先，流程是在线的。我们经常会迷失在一封来自埋点的电子邮件中，但如果是在线申请，申请、处理、访问、验证和测试都非常方便快捷，避免了信息交流。失踪;

　　其次，可以标准化管理，埋点统一管理，信息集中管理，便于后期分析使用；

　　最重要的是实现实时监控，减少泄漏和误埋。

　　当然，如果您没有跟踪管理平台，确定一个标准化的跟踪流程，选择适合您当前业务的跟踪解决方案，相信您也可以做好跟踪，通过数据完成丰富的场景分析！

　　作者：晚安；聚焦用户、产品等运营领域。

　　本文由@Goodnight 发布。原创 每个人都是产品经理。未经许可禁止复制

　　题图来自Unsplash，基于CC0协议

　　解决方案:全自动易企CMS采集，一站式采集发布（图文详解）

　　易企cms采集，当网站发布时，面临的最大问题是网站内容不足或更新不及时。网站越大，维护能力就越大，网站运营商长期以来一直在寻求以最大的成本降低实现最高质量的网站内容。依托高效强大的网络信息采集与整合，E-企业cms采集与网站对接后，持续为网站提供优质、实时的数据，节省人工投入和更大的人力，随时随地寻找文章资源。

　　如果网站位于专用网络范围内，则网站

　　将陷入网络扩展和内容补充，只能依靠人工采集互联网上的相关信息，然后复制到内网导入位于专网的网站。有了电商cms采集，现在就不用那么繁琐了，它可以自动采集发布编辑，让网站管理者可以专注于内容质量审查，网站整体SEO。

　　

　　E-Enterprisecms采集预设30多个插件来提高网站排名，通过这些插件对发布的内容进行排名和优化，从而在很长一段时间内提高网站的排名。您可以根据网站所在的行业，从发布到网站的每条内容中自动提取“长尾词”，并自动调整已发布内容的关键词密度。自动创建已发布图片的alt属性，并根据发布的内容自动生成内容中图片的匹配alt描述。

　　电子商务cms采集具有4种高效的网络信息采集功能。在专题采集中，只需输入关键字即可采集符合网站专题设置要求的网络信息，不再需要手动搜索。定向采集可以与其他类似网站同步，只需输入目标网站的地址，即可自动采集同网站的信息进行过滤。

　　

　　易企cms采集再通过定向采集，这样就无需在新闻源平台上手动采集有关行业的文章，通过定向采集功能，只需目标网站的地址和关键词即可。采集配置中，网站可以设置要采集的信息源深度，以确保数据内容采集准确、完整，并满足您的网站要求。

　　易企业cms采集通过5层网络信息过滤，使网站不会产生垃圾内容链接。数据过滤由指向目标网站原创信息源的链接的通道和链接类型执行。此外，通过对采集数据源的标题进行关键字区分和标题重复检查来执行标题筛选。内容筛选，通过将 HASH 算法应用于采集数据内容，以确保采集内容不重复。

　　结合字段筛选

　　，可以对采集内容的字段值进行筛选和比较，以确保每个字段内容采集满足要求。组合过滤：对采集内容的多个字段值进行组合过滤和比较，确保多个字段组合后的内容符合要求。