ETL，DW/BI的基石_ETL里的dw文档资源-CSDN文库

需积分: 15 61 浏览量 2013-06-10 15:12:37 上传评论 2 收藏 372KB PDF 举报

资源推荐

资源详情

资源评论

ETL 系列专题 1——DW/BI 的基石

Warren

zqw_qw@hotmail.com

终于决定写点东西了，在数据仓库领域工作了 6 年，如果加之硕士理论研究的 2.5 年，

那还是有点时间了。在 DW 领域中真的不敢说有什么大的经验，因为之前一起工作的中外同

事都不知道要比我高深多少。如果说他们是太平洋，我充其量就是我现在身边的这杯水，还

被我喝掉了半瓶！

开始想写时还真不知道写点什么？那就索性先写点 ETL 的东西吧，由于本人的水平确实

有限，欢迎同行朋友评论指正。

什么是 ETL

ETL(Extract-Transform-Load)，即抽取、转换和加载。即从源系统（业务系统）抽取数据，

加以转换，并加载到 DW 或 DM。为什么说 ETL 系统是 DW/DM（以下均称为 DW）基石？理

由是：数据仓库系统中数据质量，数据一致性，多数据源的统一集成，最终交付数据给决策

应用层等工作均有 ETL 系统完成，而这些素质正式数据仓库必备的属性，这些素质任何一项

不能满足，数据仓库系统是不健康的，是不足以被信赖用以商业决策支持的。

ETL 系统可以成就数据整个 DW/BI 系统，同样也可以摧毁 DW/BI 系统。虽然 ETL 系统是

“后台”活动的，不与终端用户直接交互，但是 ETL 系统的开发部署与运维占据了整个 DW/BI

系统的 70%的资源！ETL 系统绝对不是字面上定义的那样从源系统取出数据然后加载到 DW

的简单行为。相反它具有很多附加的功能，比如：

1、删除错误数据，修正缺失数据

2、提供可信的量度数据

3、跟踪业务数据流

4、校正多系统中的不一致性

5、使终端应用用户更容易使用数据分析业务

ETL 系统即简单又复杂，为什么这么说呢？简单到好像我们从 E-T-L 字面理解的那样简

单，说其复杂，是指在 E->T->L 这条路上，更多的 ETL 架构师和开发实施者会做更多精细的

工作（统计，日志，异常处理，监控报警等等），这些工作的多少，分化的粒度则取决于实

际情况:数据源的多少，数据奇异程度，业务需求，现有的软件或工具，以及最终的展示应

用等等。没有最精细，只有更精细，但是笔者认为“点到为止”地满足各种需求（业务需求，

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余3页未读，立即下载

内容反馈

Warren

粉丝: 22
资源: 6

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip