没有合适的资源?快使用搜索试试~ 我知道了~
元数据·大数据·主数据数据质量管理产品白皮书.docx
需积分: 0 1 下载量 135 浏览量
2022-12-17
22:33:03
上传
评论
收藏 115KB DOCX 举报
温馨提示
试读
14页
元数据·大数据·主数据数据质量管理产品白皮书.docx
资源推荐
资源详情
资源评论
编号:Data Beautifier-V 1-091106商业智能产品系列之
Data Beautifier数据质量管理产品
白皮书
YUCHENGTechnologies Ltd.
YUCHENG
火「Technologies Ltd,商业智能产品系列之Data Beautifier产品白皮书了开放的数据质量检核器接口,
从而完成特定业务规那么的数据质量检核工作。
下表简单列出本产品提供的局部检核器及其说明。
检核器名称
检核器说明
备注
唯一性规那么
唯一性检验功能实现了对某一个字段的唯一性的检测
代码规那么
代码检验功能实现了对数据中存在代码的检验。例如,
国家代码(中国CHN,美国USA)
空值规那么
空值检测功能实现了对数据库中数据是否为空 值的检
测。
长度规那么
长度检测功能实现了对数据的长度进行检测的 功能
值域规那么
值域检验功能实现了对数据的值的范围进行检 测的功
能
格式规那么
格式校验功能实现了三种格式的检验,包括:正那么表
达 式,自定义的简化表达式,自定义格式。其中自定义
格 式实现了:大陆身份证校验,香港身份证校验,澳门
身 份证校验,台湾身份证校验,组织机构代码校验,自
然 人校验,法人校验。
完整性规那么
完整性检验功能实现了数据库中两个表的全关联查询,
其中包括人表=8表,A表属于B表的情况
一致性规那么
一致性检验功能实现了对数据是否一致的检测,将第一
次读到的字段的值记录下来,当再次遇到这个字段时,
如果值不与第一次记录的值一致的话就记录下来。
另外系统还提供了自定义SQL以及自定义表达式检验功能。
数据质量检核作业
数据质量检核作业是为了完成特定数据质量检核任务而将待检测数据、质 量检核器、检核结
果文件等按照一定规那么集结在一起的工作单元。系统提供了 自定义任务组及任务的功能,通过
任务组或任务将数据质量检核作业组织成一 个特定的任务,来设定统一的触发器以及对检核任务
组、任务进行停用和启用 操作。
1.1.2 数据质量检核任务调度管理本产品的数据质量检核器(或者检核作业)
是对数据的质量问题进行检核,
Copyright © Yucheng Technologies Limited All Rights Reserved
第8页共14页
YUCHENG
Technologies Ltd.
商业智能产品系列之Data Beautifier产品白皮书
数据质量检核任务按设定的触发器进行调度运行,系统提供了检核任务的运行 状态及结果的监控
和查看功能。另外系统提供了检核任务组及任务的立即停止、 恢复、重做以及手动执行的功能。
见下列图:
开始时间:Y结束时间:▼
查看任务状态6手婀行 重做《立即停止与恢复□任务蛆任务组状态任务总数正在运行等待运行运行完成错误数量开始时间结束时间
5.3 数据质量问题管理体系
本产品对于数据质量检核出的数据质量问题提供了数据质量问题治理任务 的发起、数据质量
问题治理任务的处理、数据质量问题治理任务处理情况的审 批以及数据质量问题治理任务完成后
归档到数据质量知识库的完整的闭环的数 据质量提升机制。另外,本产品还提供了对与数据质量
问题治理任务的跟踪功 能,对于处于流程中的任务可随时查看其所在的环节,并可查看已经完成
环节 的处理情况。通过流程化的数据质量问题管理体系,提高数据质量问题处理的 效率,及时的
提升企业数据的质量。
还有,对于数据质量问题治理过程中的知识进行归档和管理,可为企业积 累珍贵的数据质量
的知识财富,为企业持续的监控、诊断数据质量问题,及其 治理提供有力的支持。
5.4 数据质量监控分析
如果说数据质量度量体系是Data Beautifier的基础,数据质量检测体系是 Data Beautifier在
此基础上打造的一把利器,那么数据质量监控分析便是Data Beautifier在“基础+利器”之上为逐
步提升企业数据质量最后使出的杀手铜。 利用数据质量问题分析图表监控数据的质量情况的变化
趋势,还可以定制数据 质量报告及时获得关注的数据的质量情况,为数据质量责任人和管理者关
注和 提升自己的数据质量提供支持。
Copyright © Yucheng Technologies Limited All Rights ReservedYUCHENG
火「Technologies Ltd,商业智能产品系列之Data Beautifier产品白皮书数据质量分析图表
数据质量分析图表包括按检核器进行的数据质量问题分析图表、按系统进 行数据质量问题分
析图表和按任务组进行数据质量问题分析图表。本产品对检 核出的数据质量问题使用直方图、饼
状图和趋势图等质量控制工具来满足数据 管理人员提供有效的控制数据质量的需要。
预校验
ED任务组拘
s到客户风险统计报送系统 出
方邮储规那么-预校逐 -以
邮储规那么-上报
匚预校裳
C整表校验 口确定性
校验 口行内一致性
校验 口行内提示性
校验
第9页共14页
YUCHENG
Technologies Ltd.
剩余13页未读,继续阅读
资源评论
zzzzl333
- 粉丝: 688
- 资源: 7万+
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功