下载  >  课程资源  >  讲义  > mapreduce框架

mapreduce框架 评分

一个实用的MapReduce框架

...展开详情
所需积分/C币:4 上传时间:2017-01-09 资源大小:46KB
举报 举报 收藏 收藏
分享 分享
MALK:一种高效处理大规模键值的MapReduce框架.pdf

大数据,Spark,MapReduce 本资料共包含以下附件: MALK:一种高效处理大规模键值的MapReduce框架.pdf

立即下载
MapReduce框架和HDFS框架

Hadoop正是基于谷歌的mapreduce-osdi04和gfs-sosp2003这两篇论文构建起来的。

立即下载
基于Hadoop的MapReduce框架研究报告

基于Hadoop的MapReduce框架研究报告,开源云计算的一个基础框架

立即下载
基于MapReduce框架一种文本挖掘算法的设计与实现

基于MapReduce框架一种文本挖掘算法的设计与实现

立即下载
(hadoop HDFS 和 Mapreduce 架构浅析

Hadoop 是一个基于 Java 的分布式密集数据处理 和数据分析的软件框架。Hadoop 在很大程度上是受 Google 在 2004 年白皮书中阐述的 MapReduce 技术的 启发。MapReduce 工作原理是将任务分解为成百上千 个小任务,然后发送到计算机集群中。每台计算机再 传送自己那部分信息,MapReduce 则迅速整合这些反 馈并形成答案。简单来说,就是任务的分解和结果的 合成。 Hadoop 的扩展性非常优秀,Hadoop 可处理分布在 数以千计的低成本 x86 服务器计算节点中的大型数 据。这种高容量低成本的组合引人注目,但 Hadoop 最吸引人的是其处理混合数

立即下载
MapReduce架构

MapReduce 是一个编程模型,也是一个处理和生成超大数据集的算法模型的相关实现。用户首先创建一个 Map 函数处理一个基于 key/value pair 的数据集合, 输出中间的基于 key/value pair 的数据集合;然后再创建一个 Reduce 函数用来 合并所有的具有相同中间 key 值的中间 value 值。现实世界中有很多满足上述处理模型的例子, 本论文将详细描述这个模型。

立即下载
Hadoop技术内幕:深入解析MapReduce架构设计与实现原理 PDF高清扫描版.pdf

Hadoop技术内幕:深入解析MapReduce架构设计与实现原理 PDF高清扫描版

立即下载
MapReduce框架统计流量模板数据

为MapReduce框架对电话号码的上行流量和下行流量及总流量进行统计的模板数据

立即下载
论文研究-改进型mapreduce框架的研究与设计 .pdf

改进型mapreduce框架的研究与设计,常涛,,随着网格计算被取代,云计算迎来了蓬勃的发展。Hadoop作为开源云计算平台,得到了国内外很多公司的青睐。相应的,作为Hadoop的子项目

立即下载
mapreduce框架学习之天气统计

一次很好的mapreduce框架学习。复习了框架大部分组件,代码都是一个一个敲上去的,借鉴了视频中老师的讲解,只包含了7个代码中关键的java文件,其他包都需要自己导入。

立即下载
Hadoop中HDFS和MapReduce框架介绍pdf

Hadoop中HDFS和MapReduce框架介绍pdf

立即下载
极简MapReduce框架Mincemeat-node.zip

Mincemeat-node 是使用Node.js实现的极简MapReduce框架,可以快速的部署投入工作,免去Hadoop繁琐的配置,享受随心大数据。Mincemeatpy实现的是一种非常简单的MapReduce模型,仅仅实现了任务的分布计算,并没有类似HDFS这样的支撑,因此只适合做计算量很 大的工作,但是相对于Hadoop的好处在于部署非常的方便,单文件随处运行,在实际使用中非常的方便,这也是我想用Node.js去实现的原因之一。 Node.js的网络异步处理模型非常适合于这种突发通信量较大,性能要求比较高的场景,并且也是单文件随处运行的典型。相对的,Node.js也有一个 很严重的缺点

立即下载
MapReduce计算框架

Driver组件:将HiveQL(类SQL)语句进行解析、编译优化,生成执行计划,然后调用底层的MapReduce计算框架。

立即下载
MapReduce设计模式(中文)

MapReduce作为一种分布式海量数据处理的编程框架,已经得到业界的广泛关注。随着Hadoop的普及,MapReduce目前已经成为海量数据处理的最基础但也是最重要的方法之一。   《MapReduce设计模式》是一本关于设计模式的书,为读者提供解决问题的模板或通用指南。书中主要介绍编程模式,即如何利用MapReduce框架解决一类问题,重在提供解决问题的方法和思路。作者花大量篇幅介绍各种模式的原理及实现机制,并给出相应的应用实例,让读者对每种模式能有更直观的理解。   由于本书不会过多涉及底层框架及MapReduce API,所以希望读者阅读《MapReduce设计模式》之前,能够对Had

立即下载
MapReduce 设计模式

MapReduce 设计模式,深入理解MapReduce编程模式,更好的利用MapReduce模型

立即下载
C 的MapReduce​框架MR4C.zip

MR4C 是 Google 开发的 C 的 MapReduce 框架,你可以在 Hadoop 架构中执行本地代码。依赖:tested with Ubuntu 12.04 and CentOS 6.5tested with CDH 5.2.0 (either MRV1 or YARN)ant (1.8.2 min)java (1.6 min)ivy (2.1 min)make (3.8.1 min)g (4.6.3 min)log4cxx (0.10.0)jansson (2.2.1 min)cppunit (1.12.1 min)proj4 (4.8.0 min)gdal (1.10

立即下载
论文研究-基于MapReduce框架下K-means的改进算法.pdf

针对海量数据背景下K-means聚类结果不稳定和收敛速度较慢的问题,提出了基于MapReduce框架下的K-means改进算法。首先,为了能获得K-means聚类的初始簇数,利用凝聚层次聚类法对数据集进行聚类,并用轮廓系数对聚类结果进行初步评价,将获得数据集的簇数作为K-means算法的初始簇中心进行聚类;其次,为了能适应于海量数据的聚类挖掘,将改进的K-means算法部署在MapReduce框架上进行运算。实验结果表明,在单机性能上,该方法具有较高的准确率和召回率,同时也具有较强的聚类稳定性;在集群性能上,也具有较好的加速比和运行速度。

立即下载