没有合适的资源?快使用搜索试试~ 我知道了~
云计算与大数据技术-Hadoop分布式大数据系统.ppt
1.该资源内容由用户上传,如若侵权请联系客服进行举报
2.虚拟产品一经售出概不退款(资源遇到问题,请及时私信上传者)
2.虚拟产品一经售出概不退款(资源遇到问题,请及时私信上传者)
版权申诉
5星 · 超过95%的资源 3 下载量 50 浏览量
2021-05-24
09:41:55
上传
评论 1
收藏 1.56MB PPT 举报
温馨提示
6.1 Hadoop概述 6.2 HDFS 6.2.1 HDFS文件系统的原型GFS 6.2.2 HDFS文件的基本结构 6.2.3 HDFS的存储过程 6.3 MapReduce编程框架 6.3.1 MapReduce的发展历史 6.3.2 MapReduce的基本工作过程 6.3.3 LISP中的MapReduce 6.3.4 MapReduce的特点 6.4 实现Map/Reduce的C语言实例 6.5 建立Hadoop开发环境 6.5.1 相关准备工作 6.5.2 JDK的安装配置 6.5.3 下载、解压Hadoop, 配置Hadoop环境变量 6.5.4 修改Hadoop配置文件 6.5.5 将配置好的Hadoop文件复制到其他节点 6.5.6 启动、停止Hadoop 6.5.7 在Hadoop系统上运行测试程序WordCount
资源推荐
资源详情
资源评论
云计算与大数据技术
云计算与大数据技术
人民邮电出版社
人民邮电出版社
目 录
第 1 章 云计算与大数据基础
第 2 章 云计算与大数据的相关技术
第 3 章 虚拟化技术
第 4 章 集群系统基础
第 5 章 MPI— 面向计算
第 6 章 Hadoop— 分布式大数据系统
第 7 章 HPCC— 面向数据的高性能计算集群系统
第 8 章 Storm— 基于拓扑的流数据实时计算系统
第 9 章 服务器与数据中心
第 10 章 云计算大数据仿真技术
CONTENTS
第 6 章 Hadoop— 分布式大数据
系统
第
第
6
6
章
章
Hadoop—
Hadoop—
分布式大数据系
分布式大数据系
统
统
《
《
云计算与大数据技术
云计算与大数据技术
》
》
21/8/14
并行计算实验室
第 6 章 Hadoop— 分布式大数据系统
6.1
6.1
Hadoop
Hadoop
概述
概述
6.2 HDFS
—
6.2.1 H D F S文件系统的原型GFS
—
6.2.2 H D F S文件的基本结构
—
6.2.3 H D F S的存储过程
6.3 MapReduce编程框架
—
6.3.1 M a p R e d u ce 的发展历史
—
6.3.2 M a p R e d u ce
的基本工作过程
—
6.3.3 L ISP 中的MapReduce
—
6.3.4 M a p R e d u ce 的特点
6.4 实现Map/Reduce的C
语言实例
6.5 建立Hadoop开发环境
—
6.5.1 相关准备工作
—
6.5.2 JD K 的安装配置
—
6.5.3 下载、解压H a d o o p
, 配置H a d o o p
环境变量
—
6.5.4 修改H a d o o p 配置文件
—
6.5.5 将配置好的 Hadoop 文
件复制到其他节点
—
6.5.6 启动、停止 Hadoop
—
6.5.7 在 Hadoop 系统上运
行测试程序 WordCount
21/8/14
并行计算实验室
Hadoop
Hadoop 是由 Apache 软件基金会研发的一种开源、高可
靠、伸缩性强的
分布式计算系统
分布式计算系统,主要用于对
大于
大于
1TB
1TB 的
海量数据的处理。
Hadoop 采用
Java
Java
语言开发
语言开发,是对 Google 的
MapReduce 核心技术的开源实现。
目前 Hadoop 的
核心模块
核心模块包括
系统
系统
HDFS
HDFS ( Hadoop
Distributed File System , Hadoop 分布式文件系
统)和
分布式计算框架
分布式计算框架
MapReduce
MapReduce ,这一结构实现了
计
计
算和存储的高度耦合
算和存储的高度耦合,十分有利于
面向数据
面向数据的系统架构,
因此已成为大数据技术领域的事实标准。
剩余63页未读,继续阅读
资源评论
- weixin_387747592024-10-13资源使用价值高,内容详实,给了我很多新想法,感谢大佬分享~
- m0_749941212023-07-05非常有用的资源,可以直接使用,对我很有用,果断支持!
- huangzhangming012021-05-31用户下载后在一定时间内未进行评价,系统默认好评。
安全方案
- 粉丝: 2181
- 资源: 3897
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功