下载  >  开发技术  >  其它  > hadoop/mapreduce-矩阵乘法 mapreduce的实现(代码)

hadoop/mapreduce-矩阵乘法 mapreduce的实现(代码) 评分:

最近在研究hadoop与mapReduce,网上教程只有个wordcount程序示范,太简单,故写了个相对复杂点的涉及到多个文件之间同时运算的矩阵乘法的代码用于实验与测试,上传供大家学习与参考。 调用方法: 执行:hadoop jar matrix.jar com.baosight.mapred.test.MatrixMulti left:/tmp/a right:/tmp/b output:/tmp/c leftprefix:000000_ rightprefix:000000_ >参数1:left:左矩阵路径 >参数2:right:右矩阵路径 >参数3:output:

...展开详情
2012-06-27 上传 大小:10KB
举报 收藏 (5)
分享
hadoop-mapreduce-examples-2.6.5.jar

hadoop-mapreduce-examples-2.6.5.jar 官方案例源码

立即下载
hadoop-mapreduce-examples-2.6.0

Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。

立即下载
hadoop-mapreduce-client-core-2.6.5.jar

hadoop-mapreduce-client-core-2.6.5.jar

立即下载
hadoop-mapreduce-examples-2.8.4.src反编译后java代码

hadoop-mapreduce-examples-2.8.4.src反编译后hadoop实例源码(java),另外一些hadoop下的一些环境变量,下载这个的小伙伴如果需要的话可以在下方留言,我会分享一下。

立即下载
编译过的hadoop-core-1.0.4.jar,可以在本地模拟MapReduce

编译过的hadoop-core-1.0.4.jar,可以在本地模拟MapReduce 如果Eclipse workspace在d:,则我们可以把d:的某个目录,比如d:\input作为输入目录;d:\output作为输出目录。 MapReduce编程模型里面这样写就可以了: FileInputFormat.setInputPaths(job, new Path("/input")); FileOutputFormat.setOutputPath(job, new Path("/output"));

立即下载
hadoop-common-2.7.3-bin-master包含hadoop.dll、winutils.exe

hadoop-common-2.7.3-bin-master包里包含Eclipse配置Hadoop环境时经常报错所需的hadoop.dll、winutils.exe

立即下载
hadoop2x-eclipse-plugin-master

用于各个Hadoop版本的各个平台的eclipse插件的生成,方便hadoop的开发,你值得拥有

立即下载
hadoop-commom-3.0.0.jar

与hadoop有关的io文件在hadoop-commom-x.x.x.jar中如:org.apache.hadoop.io.LongWritable, org.apache.hadoop.io.IntWritable org.apache.hadoop.io.Text等,相关的conf配置文件也在该jar文件中

立即下载
hadoop2x-eclipse-plugin-master.zip

个资源用来打包编译eclipse插件,进而进行mapreduce程序的开发

立即下载
hadoop-common-2.6.0-bin-master

压缩包包括适用于hadoop2.6.0的三个版本的hadoop.dll和winutils.exe

立即下载
hadoop-common-2.7.1-bin-master

hadoop安装在windows 下面需要的插件包,hadoop.dll等

立即下载
hadoop-eclipse-plugin-2.7.2.jar

hadoop-eclipse-plugin-2.7.2.jar 历尽千辛万苦,终于编译成功了本插件,并测试运行通过。 编译环境:hadoop2.7.2,eclipse-jee-mars-2-linux-gtk-x86_64.tar.gz

立即下载
hadoop-lzo-0.4.20-SNAPSHOT.jar

在hadoop下编译的hadoop-lzo的Codec编解码器,hadoop-lzo-0.4.20-SNAPSHOT.jar和源码等文件

立即下载
hadoop-common-2.2.0-bin-master

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。

立即下载
重新编译的Container-executor 目录文件路径/etc/container-executor.cfg

hadoop自带的Container-executor在配置yarn-kerberos时存在问题,这边给出编译后的Container-executor,默认加载配置文件路径/etc/container-executor.cfg,大家不用再重新编译了

立即下载
hadoop-eclipse-plugin-2.8.5.jar 插件下载

基于win7+jdk1.8.0_191+eclipse4.8+ant1.10.5 编译,可以正常使用,已经试验!

立即下载
hadoop-common-2.7.1.bin.zip

windows 64位系统下使用eclipse编译运行hadoop2.7.1程序时出错,解决办法是因为在windows下缺失hadoop.dll和winutils.exe所致。eclipse集成开发使用,供大家下载。

立即下载
hadoop-lzo-0.4.20.jar

hadoop-lzo-0.4.20 centOS6.5 64位编译出来的 拷贝jar包到hadoop和hbase中 cp /opt/hadoopgpl/lib/hadoop-lzo-0.4.20-SNAPSHOT.jar $HADOOP_HOME/share/hadoop/common/ cp /opt/hadoopgpl/lib/hadoop-lzo-0.4.20-SNAPSHOT.jar $HBASE_HOME/lib/ 2.2.6. 拷贝本地库so文件到hadoop tar -cBf - -C target/native/Linux-amd64-64/lib . | tar -xBvf

立即下载
hadoop-common-bin-2.7.*

hadoop-common-bin-2.7.*适用于windows 64位系统环境hadoop2.7.1、hadoop2.7.2和hadoop2.7.3版本!

立即下载