VIP会员
作者:CSDN
出版社:CSDN《程序员》
ISBN:1111111111117
VIP会员免费
(仅需0.8元/天)
¥ 40000.0
温馨提示: 价值40000元的1000本电子书,VIP会员随意看哦!
电子书推荐
-
《Hadoop实战》例子源码 评分:
《Hadoop实战》作为云计算所青睐的分布式架构,Hadoop是一个用Java语言实现的软件框架,在由大量计算机组成的集群中运行海量数据的分布式计算,是谷歌实现云计算的重要基石。《Hadoop实战》分为3个部分,深入浅出地介绍了Hadoop框架、编写和运行Hadoop数据处理程序所需的实践技能及Hadoop之外更大的生态系统。
上传时间:2014-07 大小:25KB
- 29.99MB
Hadoop简单应用案例
2022-06-04Hadoop简单应用案例,包括MapReduce、单词统计、HDFS基本操作、web日志分析、Zookeeper基本使用、Hive简单操作等
- 33.73MB
实战hadoop中的源码
2019-02-10实战hadoop,源码,刘鹏,开启通向云计算的捷径
- 18KB
hadoop简单示例源码
2018-12-28《Hadoop权威指南.大数据的存储与分析.第4版》随书源码,计算每年的最高气温
- 1.30MB
hadoop应用实例
2009-05-10Computing PageRank Using Hadoop
- 34.41MB
hadoop源码
2018-10-26hadoop源码,可供编译版的Hadoop源码。因此是可以直接下载进行安装的
- 157.13MB
hdfs源码.zip
2020-07-14第1章 HDFS 1 1.1 HDFS概述 1 1.1.1 HDFS体系结构 1 1.1.2 HDFS基本概念 2 1.2 HDFS通信协议 4 1.2.1 Hadoop RPC接口 4 1.2.2 流式接口 20 1.3 HDFS主要流程 22 1.3.1 HDFS客户端读流程 22 1.3.2 HDFS客户端写流程 24 1.3.3 HDFS客户端追加写流程 25 1.3.4 Datanode启动、心跳以及执行名字节点指令流程 26 1.3.5 HA切换流程 27 第2章 Hadoop RPC 29 2.1 概述 29 2.1.1 RPC框架概述 29 2.1.2 Hadoop RPC框架概述 30 2.2 Hadoop RPC的使用 36 2.2.1 Hadoop RPC使用概述 36 2.2.2 定义RPC协议 40 2.2.3 客户端获取Proxy对象 45 2.2.4 服务器获取Server对象 54 2.3 Hadoop RPC实现 63 2.3.1 RPC类实现 63 2.3.2 Client类实现 64 2.3.3 Server类实现 76 第3章 Namenode(名字节点) 88 3.1 文件系统树 88 3.1.1 INode相关类 89 3.1.2 Feature相关类 102 3.1.3 FSEditLog类 117 3.1.4 FSImage类 138 3.1.5 FSDirectory类 158 3.2 数据块管理 162 3.2.1 Block、Replica、BlocksMap 162 3.2.2 数据块副本状态 167 3.2.3 BlockManager类(done) 177 3.3 数据节点管理 211 3.3.1 DatanodeDescriptor 212 3.3.2 DatanodeStorageInfo 214 3.3.3 DatanodeManager 217 3.4 租约管理 233 3.4.1 LeaseManager.Lease 233 3.4.2 LeaseManager 234 3.5 缓存管理 246 3.5.1 缓存概念 247 3.5.2 缓存管理命令 247 3.5.3 HDFS集中式缓存架构 247 3.5.4 CacheManager类实现 248 3.5.5 CacheReplicationMonitor 250 3.6 ClientProtocol实现 251 3.6.1 创建文件 251 3.6.2 追加写文件 254 3.6.3 创建新的数据块 257 3.6.4 放弃数据块 265 3.6.5 关闭文件 266 3.7 Namenode的启动和停止 268 3.7.1 安全模式 268 3.7.2 HDFS High Availability 276 3.7.3 名字节点的启动 301 3.7.4 名字节点的停止 306 第4章 Datanode(数据节点) 307 4.1 Datanode逻辑结构 307 4.1.1 HDFS 1.X架构 307 4.1.2 HDFS Federation 308 4.1.3 Datanode逻辑结构 310 4.2 Datanode存储 312 4.2.1 Datanode升级机制 312 4.2.2 Datanode磁盘存储结构 315 4.2.3 DataStorage实现 317 4.3 文件系统数据集 334 4.3.1 Datanode上数据块副本的状态 335 4.3.2 BlockPoolSlice实现 335 4.3.3 FsVolumeImpl实现 342 4.3.4 FsVolumeList实现 345 4.3.5 FsDatasetImpl实现 348 4.4 BlockPoolManager 375 4.4.1 BPServiceActor实现 376 4.4.2 BPOfferService实现 389 4.4.3 BlockPoolManager实现 396 4.5 流式接口 398 4.5.1 DataTransferProtocol定义 398 4.5.2 Sender和Receiver 399 4.5.3 DataXceiverServer 403 4.5.4 DataXceiver 406 4.5.5 读数据 408 4.5.6 写数据(done) 423 4.5.7 数据块替换、数据块拷贝和读数据块校验 437 4.5.8 短路读操作 437 4.6 数据块扫描器 437 4.6.1 DataBlockScanner实现 438 4.6.2 BlockPoolSliceScanner实现 439 4.7 DirectoryScanner 442 4.8 DataNode类的实现 443 4.8.1 DataNode的启动 444 4.8.2 DataNode的关闭 446 第5章 HDFS客户端 447 5.1 DFSClient实现 447 5.1.1 构造方法 448 5.1.2 关闭方法 449 5.1.3 文件系统管理与配置方法 450 5.1.4 HDFS文件与操作方法 451 5.1.5 HDFS文件读写方法 452 5.2 文件读操作与输入流 452 5.2.1 打开文件 452 5.2.2 读操作――DFSInputStream实现 461 5.3 文件短路读操作 481 5.3.1 短路读共享内存 482 5.3.2 DataTransferProtocol 484 5.3.3 DFSClient短路读操作流程 488 5.3.4 Datanode短路读操作流程 509 5.4 文件写操作与输出流 512 5.4.1 创建文件 512 5.4.2 写操作――DFSOutputStream实现 516 5.4.3 追加写操作 543 5.4.4 租约相关 546 5.4.5 关闭输出流 548 5.5 HDFS常用工具 549 5.5.1 FsShell实现 550 5.5.2 DFSAdmin实现 552
- 1018KB
hadoop几个实例
2016-07-28网上很难找的hadoop代码,很适合初学或想从事大数据方向的程序猿,心动者赶紧下载。
- 181.9MB
Hadoop及源码.7
2018-02-28Hadoop及源码 Hadoop及源码 Hadoop及源码 Hadoop及源码
- 272.84MB
hadoop源码归档.zip
2021-06-07hadoop源码归档.zip
- 64.97MB
hadoop-2.8.1源码
2017-10-31hadoop源码,官方,放心下载,完整版,阅读hadoop源代码的目的不一定非是工作的需要,你可以把他看成一种修养,通过阅读hadoop源代码,加深自己对分布式系统的理解,培养自己踏实做事的心态。
- 33.69MB
实战Hadoop源码--刘鹏
2012-01-08Hadoop是google云计算基础框架的一个模仿的开源版本,是一个构建分布式系统的框架,这本《实战Hadoop》则全满的讲解了这一神奇的使用,那些对云计算感兴趣的童鞋千万别错过。
- 33.69MB
《实战Hadoop--开启通向云计算的捷径》源码
2016-03-21《实战Hadoop--开启通向云计算的捷径》源码,很详细很好的Hadoop资料,与大家分享,下载后给个赞,谢谢!
- 32KB
Hadoop Beginner's Guide 书里面的例子源码
2015-04-15从官网下载的。Hadoop Beginner's Guide 书中讲的例子的源代码。
- 45.50MB
hadoop2.6.0-cdh5.14.0 源码
2018-06-07hadoop-2.6.0-cdh5.14.0 源码 。
- 526KB
Hadoop MapReduce Cookbook 源码
2014-11-24《Hadoop MapReduce Cookbook 源码》是一本专注于实战的书籍,旨在帮助读者通过具体的例子深入理解并掌握Hadoop MapReduce技术。MapReduce是大数据处理领域中的核心组件,尤其在处理大规模分布式数据集时,它的重要...
- 33.86MB
实战hadoop源代码
2015-03-162. **HDFS操作**:源码可能包含使用HDFS API进行文件上传、下载、删除和检查等操作的示例,这些操作对于理解和使用Hadoop至关重要。 3. **MapReduce编程**:书中的例子会展示如何编写Map和Reduce函数,处理各种类型...
- 1KB
Hadoop CountWord 例子
2013-07-06这个例子展示了Hadoop的核心工作流程,包括Mapper和Reducer两个主要阶段。 首先,我们来了解一下MapReduce模型。MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行计算。它将大型任务分解为小部分,然后...
- 12KB
Hadoop-1.2.1 QQ推荐好友例子
2019-08-12标题 "Hadoop-1.2.1 QQ推荐好友例子" 提到的是一个关于Hadoop的实战案例,专注于在Hadoop框架下实现QQ推荐好友的功能。Hadoop是一个开源的大数据处理框架,由Apache软件基金会开发,它允许分布式存储和处理海量数据...
- 35.63MB
java操作hadoop之mapreduce计算整数的最大值和最小值实战源码
2018-02-03在这个例子中,输入可能是一个整数序列,我们可以通过读取每一行,将每个整数作为键(Key),值(Value)可以设置为1,表示这个数字出现了一次。 3. **编写Reducer类**:Reducer类接收Mapper的输出,聚合相同键的值...
- 101KB
hadoop实战源代码Java
2018-11-22hadoop实战源代码,包含Java操作HDFS文件的上传、下载、删除等功能
- 23.71MB
Hadoop源码包
2018-05-20Hadoop-2.6.4源码包。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
- 2.71MB
2015 Hadoop应用案例大全
2018-03-06Hadoop架构很好地解决了扩展的瓶颈,它设计部署在经济实惠的硬件上,通过横向扩展,便可无限地提升数据处理能力。基于Hadoop的大数据软件因为其强大的处理能力和高性价比在数据分析市场崭露头角。星环信息科技(上海)有限公司(以下简称星环科技)的企业级一站式大数据综合平台Transwarp Data Hub (以下简称TDH)是Hadoop发行版中的佼佼者。
- 17.41MB
hadoop源码下载
2017-02-19目前最新版本的hadoop官方源码
- 836.66MB
hadoop源码资源归档.zip
2021-05-30hadoop源码资源归档.zip
- 4.89MB
Hadoop源码分析完整版
2012-09-09Hadoop源码分析完整版
- 6.46MB
Hadoop源码分析(完整版)
2015-06-06Hadoop源码分析(完整版),详细分析了Hadoop源码程序,为学习Hadoop的人提供很好的入门指导
- 4.7MB
hadoop源码分析-HDFS部分
2014-10-27详细的Hadoop源码剖析电子版。书中引用了丰富的架构图片和流程来解析结合hadoop框架原理,推荐深度运维和二次开发者阅读
- 116.39MB
hadoop的小例子,hadoop的小例子
2018-10-24小例子是自己写的,目的是让自己熟悉一下如何在集群上运行一个mapreduce项目,大家可以参考此例子学习hadoop,对入门很有帮助。小例子是自己写的,目的是让自己熟悉一下如何在集群上运行一个mapreduce项目,大家可以参考此例子学习hadoop,对入门很有帮助
- 7.31MB
Hadoop权威指南原版和源码
2018-05-27读者可以通过书中给出的例子学习如何配置Hadoop环境,提交MapReduce任务,以及进行数据处理和分析。此外,源码分析部分可以帮助开发者理解复杂问题的解决方案,如数据分区、容错机制、资源调度等。 5. **Hadoop生态...