目录
1. 概述........................................................................................................................................................0
1.1. 背景.................................................................................................................................................0
1.2. 建设目标.........................................................................................................................................0
1.3. 建设的步骤和方法.........................................................................................................................1
2. 教学科研大数据平台概要 ....................................................................................................................1
2.1. 架构设计.........................................................................................................................................1
2.2. 教学科研大数据平台优势.............................................................................................................4
2.2.1.
应用优势
.........................................................................................................................................4
2.2.2.
未来发展优势
.................................................................................................................................7
3. 教学科研大数据平台设计 ....................................................................................................................8
3.1. 大数据资源池.................................................................................................................................9
3.1.1. cProc
云计算
..................................................................................................................................9
3.1.1.1. cProc 云计算概述 ..................................................................................................9
3.1.1.2. 数据立方..............................................................................................................10
3.1.1.3. 混合存储策略 ......................................................................................................16
3.1.1.4. 云计算核心技术 ..................................................................................................17
3.1.1.4.1. 数据处理集群的可靠性与负载均衡技术................................................17
3.1.1.4.2. 计算与存储集群的可靠性与负载均衡 ...................................................21
3.1.1.4.3. 计算与存储集群的负载均衡处理 ...........................................................23
3.1.1.4.4. 分布式文件系统的可靠性设计 ...............................................................26
3.1.1.4.5. 分布式数据立方可靠性设计 ...................................................................26
3.1.1.4.6. 分布式并行计算可靠性设计 ...................................................................28
3.1.1.4.7. 查询统计计算可靠性鱼负载均衡设计 ...................................................30
3.1.1.4.8. 数据分析与数据挖掘 ...............................................................................32
3.1.1.4.9. cProc 云计算优势 .....................................................................................44
3.1.2. cStor
云存储
.................................................................................................................................46
3.1.2.1. cStor 云存储介绍.................................................................................................46
3.1.2.2. cStor 云存储架构.................................................................................................49
3.1.2.3. Stor 云存储关键技术 ..........................................................................................55
3.1.2.4. 数据安全诊断技术 ..............................................................................................57
3.1.2.5. cStor 云存储优势.................................................................................................59
3.2. 大数据教学基础平台...................................................................................................................60
3.2.1. Hadoop
架构
.................................................................................................................................60
3.2.2. Hadoop
关键技术
.........................................................................................................................62
3.2.3. Hadoop
优势
.................................................................................................................................66
3.2.4. Hadoop
教学
.................................................................................................................................66
3.3. 教学科研私有云...........................................................................................................................70
3.3.1. Minicloud
迷你云
.........................................................................................................................70