基于云计算的海量宽带业务运营数据分析系统

Hadoop 是Google MapReduce的一个Java开源软件实现。MapReduce是一种简化的分布式编程模式，让程序自动分布到一个由普通机器组成的超大集群上并发执行。就如同Java程序员可以不考虑内存泄露一样，MapReduce运行时系统会解决输入数据的并行分发，跨越机器集群的程序执行调度，处理服务器的失效，并且管理机器之间的通信请求。MapReduce计算框架允许程序员可以不需要并行处理或者分布式计算系统的编程经验，就可以利用超大规模的分布式系统资源处理问题。Cloudbase 是一个构建于Hadoop MapReduce计算模型基础之上的高性能数据挖掘软件，适应TB、PB规模的数据分析。Cloudbase的特征是允许程序员使用 ANSI SQL 直接对大规模海量日志文件进行很方便的查询。 以下提出了采用Hadoop云计算技术实现一种标准宽带数据增值业务系统——TelEye，该系统提供集企业数据源收集、数据存储、数据分析等为一体的一站式服务，旨在通过建设企业数据仓库以长期辅助企业分析决策，提升企业网站运营效果。