没有合适的资源?快使用搜索试试~ 我知道了~
内容概要:智慧城市通过物联网基础设施、云计算基础设施、地理空间基础设施等新一代信息技术以及维基、社交网络、Fab Lab、Living Lab、综合集成法、网动全媒体融合通信终端等工具和方法的应用,实现全面透彻的感知、宽带泛在的互联、智能融合的应用以及以用户创新、开放创新、大众创新、协同创新为特征的可持续创新。伴随网络帝国的崛起、移动技术的融合发展以及创新的民主化进程,知识社会环境下的智慧城市是继数字城市之后信息化城市发展的高级形态。 适合人群:具备一定方案编写能力基础,智慧城市行业工作1-3年的需求分析师或者产品人员 能学到什么:智慧城市建设方案,技术架构,行业技术要求,行业现状分析等
资源详情
资源推荐
资源评论

数据中台标准技术方案
第 0 页,共 32 页
数据中台标准技术方案

数据中台标准技术方案
第 0 页,共 32 页
目录
第 1 章 综述 ...................................................1
1.1 项目背景...................................................1
1.2 建设目标...................................................1
1.2.1 数据资产自动汇聚、一键发布....................................1
1.2.2 数据资产可视、可用、可管理....................................2
1.2.3 数据质量可控、可视、可追溯....................................3
1.3 建设思路...................................................3
第 2 章 建设方案 ...............................................5
2.1 采集层.....................................................5
2.1.1 采集适配模块..................................................5
2.1.2 数据处理适配器................................................5
2.1.3 数据采集策略的定制管理........................................6
2.1.4 数据补采......................................................8
2.1.5 采集调度模块..................................................9
2.2 数据模型层................................................17
2.2.1 建模方法思路.................................................19
2.2.2 数据模型分层架构设计.........................................22
2.3 数据治理功能..............................................24
2.3.1 统一数据标准管理.............................................24
2.3.2 统一数据建模.................................................24
2.3.2.1 统一数据加工.................................................25
2.3.3 统一数据资产.................................................25
2.3.4 统一数据质量管理.............................................25
2.3.4.1 统一数据共享与开放...........................................26
2.4 能力开放..................................................26
2.4.1 数据资产开放.................................................27
2.4.2 指标开放.....................................................27
2.4.3 数据服务超市.................................................27
2.5 网管迁移方案..............................................27
2.5.1 BI 工具 ......................................................28

数据中台标准技术方案
第 1 页,共 32 页
第1章 综述
1.1 项目背景
在 20 年集团网络工作部署,明确提出构建网络中台,推进业务拉通和数据共
享。打造数据业务化、业务数据化、技术通用化的网管中台架构体系。以业务与
数据治理为核心,存量系统共性能力按需解耦改造、新增能力遵循分层架构建设。
1.2 建设目标
针对本次系统接管与替换,在整体架构上考虑以中台支撑现有系统的发展,
基于智慧平台构建的 OSS 数据中台,实现数据专业整合,打通专业信息壁垒和数
据孤岛,提升数据规范化水平。实现数据集中存储和业务逻辑的数据处理,包括
按时间粒度和维度组合的数据汇总。同时数据中台中的数据可根据需要封装后直
接对上层应用开放。
1.2.1 数据资产自动汇聚、一键发布
数据资产多手段自动汇聚
通过三种手段实现数据处理相关的接口、模型、任务、服务、指标各环节元
数据及血缘关系的自动获取,同时发布为数据资产。
✓ 血缘关系自动获取,自动获取数据实体间的上下游信息,字段之间转换
关系。
✓ 血缘关系登记录入:在无法自动获取血缘关系的场景下,提供血缘关系
登记录入界面,以补充完整数据血缘关系。
✓ 元数据登记录入:支持数据实体的批量录入功能,能够满足物理实体及
其元数据信息的快速创建。

数据中台标准技术方案
第 2 页,共 32 页
数据资产一键发布
依托统一的元数据库,将开发完成的标签、指标数据一键发布到标签库、指
标库、。
标签库:展现企业的标签数据,用于包括开发人员、业务人员、运维人员理
解系统标签库的现状,支撑其进行数据订阅使用、生命周期管理等应用。
指标库:展现企业的指标数据,用于包括开发人员、业务人员、运维人员理
解系统标签库的现状,支撑其进行数据订阅使用、生命周期管理等应用。
1.2.2 数据资产可视、可用、可管理
强化元数据管理能力
将数据开发过程和元数据登记录入过程融合,实现元数据信息的自动录入。
实现数据开发的统一管控
数据生产各环节的开发工作基于数据管理模块实现,各环境的元数据信息自
动获取,并同步给其他应用系统,确保应用系统的元数据信息与数据管理模块一
致。
数据资产应用审批
确保数据资产安全,上层应用或用户申请数据使用时,需要通过流程审批。
数据对内开放信息完整
提供样例数据查询,字段级统计数据查询,以方便开发人员选择所需数据资

数据中台标准技术方案
第 3 页,共 32 页
产。
1.2.3 数据质量可控、可视、可追溯
数据标准落地
结合湖南移动网络运维与业务发展要求,梳理适合本地的数据标准,并基于
数据管理模块完成数据标准的 IT 落地。
数据血缘关系可视
通过数据生产各环节的元数据信息自动获取,形成端到端的数据血缘关系,
通过可视化手段呈现数据血缘关系。
端到端数据质量监控
依托数据标准与数据血缘关系的构建,建立数据质量稽核告警与端到端可视
化呈现机制,质量情况可监控,可量化。
1.3 建设思路
系统整体分为数据采集层、数据模型层、能力开放层及功能域。
数据采集层:采集层采用模块化设计思想,从业务功能上分为采集适配器、
数据处理层、采集调度层、数据共享层四个层次,并通过系统自身管理模块
实现自身的业务逻辑控制和管理,通过多维监控和质量管理,实现对系统平
台的实时多角度监控与数据质量管理;同时,开放标准化的外部管理接口,
以实现对外的可管理性。业务功能层面,每层只需要关心本层的数据、业务
剩余31页未读,继续阅读






资源评论

xfgmfgmfm
- 粉丝: 403
- 资源: 1万+

上传资源 快速赚钱
我的内容管理 收起
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助

会员权益专享
安全验证
文档复制为VIP权益,开通VIP直接复制
