字节跳动-抖音数据埋点建设和数据治理
需积分: 36 107 浏览量
2022-07-05
10:20:13
上传
评论 5
收藏 1.1MB PDF 举报
导读：埋点数据是数据分析、推 荐 、运营的基 础 ，低 延 时 、稳定、 高 效 的埋点数据流对提 高 用 户 体 验 有 着 非 常 重 要的作用。而 随 着
流量的增 大 ，埋点的增 多 ， 在 大 流量场景下， 埋 点 数据流的建设和治 理 也 面 临 不 同 的 挑 战。本 文 将 介 绍 字 节 跳 动在埋点数据流业 务
场景遇到 的 需 求 和 挑 战 ， 以 及 为 了应对这些需求和 挑 战 在 建 设 和 治 理 过 程 中的具体实践。主 要 包 含 以 下 几 个 部 分 内 容：
埋点数据 流 简 介
埋点数据 流 建 设 实 践
埋点数据 流 治 理 实 践
未来规划
01
埋点数据流简介
1. 埋点数据 流 在 字 节
埋点数据流主要处理的数据是埋点，埋点也叫 Event Tracking，是数据和业务之间的桥梁，也是
数据分析、推荐、运营的基石。
用户在使用 App 、小程序、 Web 等各种线上应用时产生的行为数据主要通过埋点的形式进行
采集上报，按不同的来源可以分为：
① 客户端埋点
② Web 端埋点
③ 服务端埋点
埋点通过埋点收集服务接收到 MQ，经过一系列的 Flink 实时 ETL 对埋点进行数据标准化、数据清
洗、数据字段扩充、实时风控反作弊等处理，最终分发到不同的下游。下游主要包括推荐、广告、
剩余14页未读，继续阅读
评论0
最新资源