hadoop_4hadoop_4

所需积分/C币:3 2008-12-29 9.54MB application/x-rar
评分

MapReduce Library将Input分成M份。这里的Input Splitter也可以是多台机器并行Split。 Master将M份Job分给Idle状态的M个worker来处理; 对于输入中的每一个<key, value> pair 进行Map操作,将中间结果Buffer在Memory里; 定期的(或者根据内存状态),将Buffer中的中间信息Dump到本地磁盘上,并且把文件信息传回给Master(Master需要把这些信息发送给Reduce worker)。这里最重要的一点是,在写磁盘的时候,需要将中间文件做Partition(比如R个)。拿上面的例子来举例,如果把所有的信

...展开详情
立即下载 最低0.43元/次 学生认证VIP会员7折
举报 举报 收藏 收藏
分享
616KB
hadoop_dll_winutil_2.7.1

hadoop_dll_winutil_2.7.1

2018-11-16 立即下载
782KB
hadoop_dll_winutil_2.7.2.zip

根据你的hadoop版本下载相应的文件,我们用的是2.7.2所以要求支持hadoop2.7.2的(低版本的hadoop.dll会报错),然后拷贝下载文件到hadoop的bin目录,如果有已存在的文件直接跳过就行,不用覆盖原来的bin目录下的文件,支持2.7以上,亲测没有问题。

2016-07-22 立即下载
127B
Hadoop技术内幕_深入解析HADOOP_COMMON和HDFS架构设计与实现原理

资源名称:Hadoop技术内幕_深入解析HADOOP_COMMON和HDFS架构设计与实现原理内容简介:《Hadoop技术内幕:深入解析Hadoop Common和HDFS架构设计与实现原理》内容简介:“Hadoop技术内幕”共两册,分别从源代码的角度对“Common HDFS”和MapReduce的架构设计与实现原理进行了极为详细的分析。《Hadoop技术内幕:深入解析Hadoop Common 资源太大,传百度网盘了,链接在附件中,有需要的同学自取。

2019-07-23 立即下载
150MB
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip.001

flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.tar flink安装包,支持hadoop2.7.2 scala 2.12,编译完成的二进制包flink安装包

2020-03-25 立即下载
75KB
hadoop2.7.2以下_winutils_exe和hadoop_dll

hadoop2.7.2以下_winutils_exe和hadoop_dll,内含github地址

2018-11-21 立即下载
150MB
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.z01

flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.tar flink安装包,支持hadoop2.7.2 scala 2.12,编译完成的二进制包flink安装包,支持hadoop2.7.2 scala 2.12,编译完成的二进制包

2020-03-24 立即下载
11.58MB
hadoop权威指南英文第四版Hadoop_ The Definitive Guide, 4th Edition

大数据hadoop权威指南英文第四版Hadoop_ The Definitive Guide, 4th Edition

2018-06-16 立即下载
129.52MB
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip

flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.tar flink安装包,支持hadoop2.7.2 scala 2.12,编译完成的二进制包flink安装包

2020-03-24 立即下载
105KB
hadoop_win7_32位环境配置

hadoop_win7_32位环境配置 ,相关错误解决办法

2015-11-18 立即下载
155.71MB
Hadoop_2.X_HDFS源码剖析.pdf

Hadoop_2.X_HDFS源码剖析.pdf.

2018-12-29 立即下载
722KB
windows本地化Hadoop(hadoop_dll2.6.0_64bit)

当我们想要在Windows系统中模拟Hadoop集群,可以使用该插件 1.在没有中文路径下进行解压 2.将. 本地路径/hadoop_dll2.6.0_64bit/bin添加到环境变量,HADOOP_HOME=本地路径/hadoop_dll2.6.0_64bit/bin

2018-05-26 立即下载
445KB
hadoop_64_native_lib

解决unable to load native library的问题 mac brew install hadoop方式安装的hadoop没有lib文件夹 官方下载的hadoop包是32位的在64位机器需要编译后才可以 将lib文件放到hadoop目录中即可

2018-11-08 立即下载
2.74MB
Understanding_Hadoop_Clusters_and_the_Network

Understanding_Hadoop_Clusters_and_the_Network-slides_and_text_bradhedlund_com.pdf

2013-01-02 立即下载
155.71MB
Hadoop_2.X_HDFS源码剖析_带索引书签目录_徐鹏

Hadoop_2.X_HDFS源码剖析_带索引书签目录_徐鹏,内容不错,值得阅读!

2018-05-09 立即下载
75KB
hadoop2.7_winutils_exe和hadoop_dll

hadoop2.7版本本地安装运行必须的winutils.exe和hadoop.dll

2018-09-07 立即下载
127B
Hadoop_RPC详细分析

资源名称:Hadoop_RPC详细分析内容简介:本书主要对Hadoop RPC进行详细分析;有需要的朋友可以下载看看。HadoopRPC逻辑上分成三部分:1.1. RPC InterfaceRPC对外接口。1.2. RPC ServerRPC服务端的实现。1.3. RPC ClientRPC客户端的实现。资源截图: 资源太大,传百度网盘了,链接在附件中,有需要的同学自取。

2019-07-23 立即下载
277KB
Hadoop_Hive安装--自己整理

Hadoop_Hive安装--自己整理

2013-11-14 立即下载
141KB
lucene+hadoop_分布式搜索运行框架.pdf

lucene+hadoop_分布式搜索运行框架.

2016-02-18 立即下载
11.61MB
hadoop入门最好的文档

hadoop从零开始 细节问题细得不能再细 新手绝对入门的圣经 1.细细品味Hadoop_Hadoop集群(第1期)_CentOS安装配置 2.细细品味Hadoop_Hadoop集群(第2期)_机器信息分布表 3.细细品味Hadoop_Hadoop集群(第3期)_VSFTP安装配置 4.细细品味Hadoop_Hadoop集群(第4期)_SecureCRT使用 5.细细品味Hadoop_Hadoop集群(第5期)_Hadoop安装配置 6.细细品味Hadoop_Hadoop集群(第5期副刊)_JDK和SSH无密码配置 7.细细品味Hadoop_Hadoop集群(第6期)_WordCount运行详

2014-07-24 立即下载
8.23MB
Hadoop权威指南 第四版 英文版 Hadoop_The Definitive Guide 4th Edition

Hadoop权威指南 第四版 英文版 Hadoop_The Definitive Guide 4th Edition 带书签完整图片

2018-06-21 立即下载
img
freegq_4000

关注 私信 TA的资源

上传资源赚积分,得勋章
相关内容推荐