1 数据中台概述....................................................................................................................................................................................................................................................... 3
1.1 数据中台介绍.............................................................................................................................................................................................................................................. 3
1.2 数据中台的价值.......................................................................................................................................................................................................................................... 4
1.3 数据中台设计原则....................................................................................................................................................................................................................................... 8
1.3.1 数据的一致性与标准性........................................................................................................................................................................................................................ 8
1.3.2 数据的实用性与服务性........................................................................................................................................................................................................................ 8
1.3.3 数据的独立性与可扩展性..................................................................................................................................................................................................................... 8
1.3.4 数据安全性........................................................................................................................................................................................................................................ 8
1.3.5 数据分级管理机制............................................................................................................................................................................................................................ 10
1.4 数据中台设计方法..................................................................................................................................................................................................................................... 10
1.4.1 基千面向服务的架构方法 (SOA)......................................................................................................................................................................................................... 10
1.4.2 业务系统规划法 (BSP)...................................................................................................................................................................................................................... 10
1.4.3 系统工程理论................................................................................................................................................................................................................................... 11
2 数据中台核心功能.............................................................................................................................................................................................................................................. 12
2.1 技术架构.................................................................................................................................................................................................................................................. 12
2.1.1 层次架构......................................................................................................................................................................................................................................... 13
2.1.2 逻辑架构......................................................................................................................................................................................................................................... 14
2.1.3 数据架构......................................................................................................................................................................................................................................... 15
2.2 数据统一采集接入平台............................................................................................................................................................................................................................... 16
2.2.1 平台架构......................................................................................................................................................................................................................................... 16
2.2.2 数据流程......................................................................................................................................................................................................................................... 16
2.2.3 平台功能......................................................................................................................................................................................................................................... 16
2.3 数据集中处理平台..................................................................................................................................................................................................................................... 29
2.3.1 平台架构......................................................................................................................................................................................................................................... 29
2.3.2 数据流程......................................................................................................................................................................................................................................... 30
2.3.3 平台功能......................................................................................................................................................................................................................................... 30
2.4 数据组织管理平台..................................................................................................................................................................................................................................... 48
2.4.1 平台架构......................................................................................................................................................................................................................................... 48
2.4.2 数据流程......................................................................................................................................................................................................................................... 50
2.4.3 平台功能......................................................................................................................................................................................................................................... 50
2.5 数据全域治理平台..................................................................................................................................................................................................................................... 57
2.5.1 平台架构......................................................................................................................................................................................................................................... 57
2.5.2 数据流程......................................................................................................................................................................................................................................... 57
2.5.3 平台功能......................................................................................................................................................................................................................................... 57
2.6 数据质量管理平台..................................................................................................................................................................................................................................... 62
2.6.1 数据标准管理................................................................................................................................................................................................................................... 62
2.6.2 数据生命周期管理............................................................................................................................................................................................................................ 63
2.6.3 数据质量管理................................................................................................................................................................................................................................... 65
2.6.4 数据运维管理................................................................................................................................................................................................................................... 65
2.7 数据共享服务平台..................................................................................................................................................................................................................................... 66
2.7.1 平台架构......................................................................................................................................................................................................................................... 66
2.7.2 数据流程......................................................................................................................................................................................................................................... 66
2.7.3 平台功能......................................................................................................................................................................................................................................... 66
2.8 数据可视化平台........................................................................................................................................................................................................................................ 76
2.8.1 平台架构......................................................................................................................................................................................................................................... 76
2.8.2 数据流程......................................................................................................................................................................................................................................... 77
2.8.3 平台功能......................................................................................................................................................................................................................................... 77
3 主要关键技术..................................................................................................................................................................................................................................................... 85
3.1 内存级数据交换共享.................................................................................................................................................................................................................................. 85
3.2 一站式数据集成和数据管理......................................................................................................................................................................................................................... 87
3.3 数据分析模型............................................................................................................................................................................................................................................ 88
3.4 数据治理技术............................................................................................................................................................................................................................................ 88
3.5 数据挖掘技术............................................................................................................................................................................................................................................ 92
3.6 可视化建模技术........................................................................................................................................................................................................................................ 93
3.7 NLP 语义分析技术..................................................................................................................................................................................................................................... 95
3.8 知识图谱技术............................................................................................................................................................................................................................................ 96
3.9 数据交换共享技术指标............................................................................................................................................................................................................................... 97
3.10 应用系统技术指标................................................................................................................................................................................................................................... 97
3.11 数据加工分析技术指标............................................................................................................................................................................................................................. 97
评论0